基于Apache Spark的MODIS海表温度反演方法

作者：刘欢; 陈能成^*; 陈泽强

来源：计算机系统应用, 2018, 27(09): 112-117.

DOI：10.15888/j.cnki.csa.006534

• Apache Spark
• MODIS
• 海表温度

为应对海量遥感影像快速计算的需求,通过对影像获取、算法和计算过程优化和改进,提出了一种基于Apache Spark并行计算框架的MODIS海表温度反演方法,实现了海量MODIS遥感影像的海表温度快速反演.应用四轮网络查询请求获取特定的时空范围影像数据,提高影像获取阶段的效率;应用简化算法参数、拟合过程变量改进海表温度劈窗算法,使之适合快速并行计算;应用弹性分布式数据集(RDD)窄依赖关系的优点,避免并行计算中的数据交换延迟.通过单机模式与集群模式对比实验,发现集成了并行计算框架的集群模式影像处理效率约为单机模式的10倍.研究结果表明了融合集群计算技术的海表温度反演过程有效提高了传统单机应用程序的处理效率.

• 单位
  武汉大学测绘遥感信息工程国家重点实验室