科研之友
微信
新浪微博
Facebook
分享链接
摘要
自动化巡检平台是智能处理数据的崭新手段,当代信息社会不断产生大量数据流,为提升数据巡检性能,开发一种海量数据流环境下自动化巡检平台。数据采集层核心是Flume NG技术,包括Source、Channel、Sink组件,完成数据采集与传输;数据挖掘层利用数据挖掘过程模型、代码生成引擎、数据挖掘组件模型以及MapReduce执行框架等技术挖掘海量数据,获取自动化巡检结果;巡检结果在功能展示层通过B/S系统展现。仿真实验结果显示:海量数据环境下,平台查全率与查准率始终高于95%,巡检结果与实际情况一致,是一种可靠的海量数据自动化巡检平台。
- 单位
