针对配电变压器的数据清洗方法

摘要：

配电变压器作为配用电系统的关键环节,由于分布面广、网络结构复杂、运行环境恶劣等客观条件的制约,其数据在实际运行中常存在大量异常和缺失情况.为解决上述问题,以现实中的配电变压器数据为研究样本,首先分析了配电变压器数据异常和数据丢失2类情况的产生原因,之后采用小样本数据进行算法研究,针对配电变压器数据异常问题提出基于Kernel Smoothing技术的异常数据识别方法,针对配电变压器数据丢失问题提出了基于Pearson相关系数与回归模型相结合的缺失数据恢复方法.为验证所提方法能够满足TB级数据的运算效率,采用6台服务器搭建Spark并行计算结构,对大样本的配电变压器数据进行了异常数据的识别和缺失数据的恢复,相关结果证明了所提方法的实际价值.

关键词：配电变压器、数据清洗、Spark技术、大数据

所属期刊栏目：41

分类号：TM721(输配电工程、电力网及电力系统)

在线出版日期：2017-04-14（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：1008-1014