依托Hadoop架构的海量变压器实时监测与存储方案构建

作者：韦彪; 刘天琪^*; 苏学能

来源：电测与仪表, 2020, 57(10): 6-75.

DOI：10.19753/j.issn1001-1390.2020.010.002

• 智能电网
• 在线监测
• 变压器
• Hadoop框架
• HBase

随着智能电网的建设以及电力变压器在线监测技术的成熟,电力变压器在线监测数据呈现出体量大、类型多等特点。使用传统存储技术存储变压器在线监测数据,已不能满足实时、快速的需求。为此,设计基于Hadoop集群的变压器在线监测数据存储方案。该方案利用HBase(分布式列式数据库)具有快速实时读写数据的优势,将变压器在线监测系统采集的海量数据实时快速地存储。为能自动快速实时收集数据和避免因数据流过大造成系统崩溃,分别采用Flume(日志收集工具)和Kafka(分布式流处理平台)收集和缓存数据。以电力变压器在线监测的油色谱数据为例,验证了所提存储方案的可行性和有效性。

• 单位
  四川大学; 国网四川省电力公司电力科学研究院