科研之友
微信
新浪微博
Facebook
分享链接
摘要
传统方法针对多源异构数据的差异性分析不足,不适于复杂多源异构环境下大数据调度,或者没有考虑通信开销,导致计算开销过大,只采用入口数据的调度,合理性差。为此提出一种新的多源异构大数据跨源调度方法。分析了多源异构大数据跨源调度原理。利用采集与融合网络页面,建立全部多源异构大数据统一数据模型,构造模型的数据结构、处理手段、约束规则以及分类体系。利用纵向数据融合和横向数据融合完成多源异构大数据融合,以增强数据的一致性。在此基础上,通过数据调度优先级计算与处理器分配实现多源异构大数据跨源调度。仿真结果表明,所提方法平均等待时间短,加速比高,整体调度性能强。
- 单位
