大规模异构集群地震作业调度与资源管理系统的设计与实现

作者：罗刚; 陈继红; 孙孝萍; 周坤; 杜吉国

来源：石油地球物理勘探, 2017, 52(S2): 200-10.

DOI：10.13810/j.cnki.issn.1000-7210.2017.S2.034

• 作业调度
• 资源管理
• 插件化
• 调度算法
• 数据管理
• 资源监控

地震数据处理对计算能力的要求越来越高,超大计算量的新算法不断投入应用,大规模并行计算和异构协同计算成为常态;同时大型数据中心资源的不当划分常导致设备利用率偏低。本文主要阐述GeoEast大规模集群作业调度及资源管理子系统的总体结构、数据管理、调度算法及插件化资源监控技术。通过对节点的统一管理与实时监控,不仅支持大规模作业并发运行,而且解决了大规模网络环境下作业调度和负载均衡问题。保障作业在最佳资源环境下运行,提高计算资源的利用率和数据处理效率,为地震处理作业的运行提供可靠的支撑。