分布式数据质量管理系统在电力企业的实践和应用

摘要：

随着企业信息化水平和企业精细化管理要求的不断提高,企业对数据管理的需求也随之增强,如何提高企业数据质量更是需要重点解决的问题.针对电力企业数据质量管理面临的挑战,创新提出了分布式数据质量管理解决方案.针对集中式数据质量系统的性能瓶颈,在研究数据质量系统特点并借鉴国内外对大数据的解决方案后,提出了基于Hadoop分布式处理框架的解决方案.利用Hadoop集群,可以把缺陷数据从Oracle 中抽离,分散存储在集群里多台服务器上,以有效提高磁盘I/O性能和数据分析性能.

关键词：数据质量管理、分布式、Hadoop

所属期刊栏目：32

分类号：TP391(计算技术、计算机技术)

在线出版日期：2016-06-20（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：169-174