科研之友
微信
新浪微博
Facebook
分享链接
摘要
随着气象现代化的逐步推进及气象观测技术的快速发展,随之而来的是气象数据量的指数级增长,气象预报技术也是日新月异尤其是数值预报技术等,同时公众对预报准确率及精确预报的要求也越来越高。为了提高气象预报的准确率以及气象服务水平,必须对这些海量的气象数据进行更多的挖掘利用,但利用传统技术处理这些海量数据的效率已无法满足现行业务需求,互联网技术的发展也为这些海量数据的处理提供了新的技术。文中主要利用云计算技术Hadoop对气象数据进行处理,将气象数据清洗处理后存储于分布式文件系统HDFS,在此基础上采用MapReduce编程架构对气象数据进行复杂检索。进行了参数调优并得到了一个初步的结果,为后续优化工作提供了更多思路以及结果对比。
