基于KVM虚拟化技术的Hadoop架构

作者:夏上云; 王旻超; 张惠然; 戴东波; 谢江; 李青; 张武
来源:微电子学与计算机, 2013, (03): 63-66.
DOI:10.19304/j.cnki.issn1000-7180.2013.03.016

摘要

本文提出并实现了一种Hadoop与虚拟化技术相结合的模型.该模型将多核计算机虚拟成多节点集群,最大限度地利用计算资源.在实验测试的基础上,通过分析任务在Hadoop环境中的并行机制,弄清计算任务在节点中与核中的分配方式,以达到提高并行效率、降低硬件开销的目的,最后通过对典型应用问题进行计算,从而对本文所提出模型的正确性和有效性进行了验证.

全文