一种海量异构传感器格式数据的解析方法

作者:沈玉龙; 胡晓康; 马冬洁; 邬俊杰; 马飞昊; 张立; 潘超杰; 郝飞扬; 常二慧; 陈俊峰; 郑佳伟; 张欢
来源:2018-04-13, 中国, CN201810333797.5.

摘要

本发明属于物联网技术领域,公开了一种海量异构传感器格式数据的解析方法,初始化C#TF#IDF测量器模块,使用K#Means算法对数据进行聚类模块,数据模板模块,利用规则模板解析传感器信息模块,根据数据集聚类准确度对脏数据进行清洗或回溯优化信息模板库模块。本发明可以满足物联网传感器数据实时处理的需求,并且针对数据集动态变化的特点,融合自修正模块,自动过滤脏数据或者生成新的解析规则;实现解析传感器数据准确度大于95%;可以选择清洗数据集中的脏数据或回溯优化规则模板。本发明可以达到自动解析其信息的效果;对于不同的传感器环境,通过调节准确度和自修正参数来使系统在不同的环境下达到一个综合的最佳效果。