基于Storm架构的电力物联网流数据处理

• Published in: 电力系统保护与控制 Vol. 49; no. 20; pp. 112 - 119
• Main Authors: 张磊, 刘辛彤, 蔡硕, 刘红艳, 刘蕾
• Format: Journal Article
• Language: Chinese
• Published: 国网河北省电力有限公司信息通信分公司,河北 石家庄 050000%华北电力大学电气与电子工程学院,河北 保定 071003 16.10.2021
• Subjects: 流数据处理;数据清洗;Storm结构;支持向量机;电力物联网
• ISSN: 1674-3415
• DOI: 10.19783/j.cnki.pspc.201655

数据的采集、分析和处理是目前电力系统重点关注的问题之一.电力物联网系统中数据业务处理需求多样,尤其是流数据的处理对时延要求严格.然而,现有的数据处理方法形式单一,不能很好地满足低时延处理要求.因此,提出了基于Storm架构的电力物联网流数据处理方法.首先,基于Storm拓扑结构提出分布式流数据处理框架.进而采用流水线式的处理方式,从而达到缩短处理时间的效果.在数据接入后,采用循环队列和流转算子的方法.然后再通过边缘计算处理海量的数据,实现高效的协同工作.此外,通过支持向量机预测算法预测数据的发展趋势,采用清洗技术对脏数据进行处理,解决数据传输过程中的污染情况.仿真结果表明,与传统数据处理方法相比,所提流数据处理方法大大缩短了数据处理时间,满足了大量流数据处理的需求.