随着大数据应用的深入,如何提高大数据应用的时效性,成为大数据工作中的关键。针对实时海量数据预警处置的问题,设计了一种基于流数据处理的预警系统,系统包含了数据预处理、预警规则设置、预警数据识别、预警数据存储等模块,系统中关键组件包括了分布式消息系统Kafka、分布式流式计算框架Storm。预警规则支持关键词匹配或正则表达式匹配两种方式。系统可广泛应用于实时性要求较高的各类预警处置系统。
科研之友
微信
新浪微博
Facebook
分享链接
