摘要
针对城市轨道交通(简称"城轨")信号智能运维系统建设与应用过程中海量数据处理的难题,文章研究了城轨信号智能运维系统数据平台,并设计了一种数据平台架构及其通信组件方案,以实现高性能的数据采集。该平台基于HDFS分布式文件系统来保障海量数据存储,采用MapReduce框架实现高可靠性、高效性与高容错性的大数据离线计算,并通过Spark和Flink框架实现数据的实时计算,解决了传统存储架构吞吐量和数据处理性能的瓶颈问题。仿真测试结果显示,相对于传统数据平台,该平台数据处理效率提升约4.8倍,系统吞吐量性能提高约2.9倍,验证了其有效性,为城轨信号智能运维系统的实现奠定了基础。
- 单位