基于Hadoop与MongoDB整合技术的大数据处理分析

作者：史小英; 杨浩

来源：电脑知识与技术, 2019, 15(29): 1-10.

DOI：10.14004/j.cnki.ckt.2019.3401

• Hadoop
• MongoDB
• 整合
• 大数据处理

在数据类型不断增加,规模逐渐扩大的趋势下,No SQL技术与Map Reduce并行处理理念开始备受关注。而作为No SQL数据库典型代表,MongoDB可索引并查询大量数据,但是其所提供的Map Reduce无法满足太过繁杂的数据分析与并行计算。而Hadoop具备强大的Map Reduce计算能力,但实时服务延时较长。对此,可基于扩展性、数据本地化等相关要素分析,整合Hadoop与MongoDB,针对不同应用场景,寻求最优整合方式,以提高大数据处理效率与质量。

• 单位
  榆林职业技术学院; 西安航空职业技术学院