云计算环境中HDFS数据块存储策略研究

作者：袁爱平; 陶志勇; 邓河; 陈为满

来源：电脑知识与技术, 2020, 16(26): 33-35.

DOI：10.14004/j.cnki.ckt.2020.2761

• 云计算
• HDFS
• 位置感知
• 数据存储

HDFS(Hadoop Distributed File System)以流式数据访问模式存储超大文件,具有高可靠性、高扩展性、低成本等特性,已广泛运行于商用硬件集群中。但在云计算系统中,由于采用了虚拟化技术,文件存储时如采用HDFS默认的存储策略,将带来数据可靠性的下降。本文通过对HDFS存储方法的改进,提出了一种充分考虑云环境中虚拟机存储位置的数据块存储策略,避免了多个数据块副本存储在同一台物理机器上。实验结果证明,该方法均衡了数据块在物理节点中的存储,提高了系统的可靠性。