科研之友
微信
新浪微博
Facebook
分享链接
摘要
随着新型航空武器装备能力的不断提升，作战试验数据来源不断拓展、业务系统种类及构成更加复杂，非结构化数据所占比例不断提升。基于人工、单一业务系统、结构化数据的采集方式，无法满足作战试验数据采集的实时性、完整性、有效性要求，尤其多源、异构数据的采集管理已成为必须解决的问题。为解决这一问题，从完善数据采集标准规范入手，借鉴主数据管理的理念，使用ELK和FTP组件，搭建数据采集工具，通过对主数据进行抽取、使用复合码或JSON对采集到的数据置标记录，实现了对不同来源及不同类型的作战试验数据进行整合，自动形成规范的文件目录结构，并实现对多节点、不同数据结构数据的自动化采集。
