摘要

该文介绍了一种基于大数据平台的物联网网络性能监测系统。从网络监控部门的生产需求、功能模块设计、系统实现、最终应用呈现等几个角度予以介绍。系统数据来源于大数据平台,使用Kafka订阅物联网的相关信令数据。本地处理程序使用Java语言进行数据处理,同时应用到了机器学习的一些方法,使用Python语言构建物联网用户业务场景识别模型。以关联分析方法为基础,提出使用不同事件的关联关系作为事件日志归集的一种解决方法。通过对事件日志的出现时点、事件日志的重要性级别以及事件的自愈性属性等标签信息,将监测系统的海量的日志信息做一定程度的归集,减少日志信息的数量,提升运营商业务中断时的快速处理能力。