摘要
以某大型发电集团电力建设项目经济性评价为研究对象,采用大数据技术,实现大数据应用的方法创新。系统设计了基于大数据的经济评价系统架构,开发了基于分布式调度的表达式向量化计算引擎,解决了QSL单点故障、无法分布式拓展的问题;在分布式解决方案中,将中间结果集保存在计算节点本地,在发生后续计算时根据通信开销和计算开销协调数据资源,选择适当的计算节点完成计算,有效提升分布式系统效率。
- 单位
以某大型发电集团电力建设项目经济性评价为研究对象,采用大数据技术,实现大数据应用的方法创新。系统设计了基于大数据的经济评价系统架构,开发了基于分布式调度的表达式向量化计算引擎,解决了QSL单点故障、无法分布式拓展的问题;在分布式解决方案中,将中间结果集保存在计算节点本地,在发生后续计算时根据通信开销和计算开销协调数据资源,选择适当的计算节点完成计算,有效提升分布式系统效率。