基于调度树的分布式文件系统数据流调度算法研究

作者：高原; 顾文杰; 彭晖; 陈鹏; 季学纯

来源：江苏科技信息, 2017, (27): 40-42+45.

• 分布式文件系统
• 数据流
• 并发
• 调度

文章针对HDFS的数据写入性能不高的问题提出了一种基于调度树的数据流并发传输的调度算法。该算法将文件系统的节点分为转发节点和叶子节点,按流量匹配原则将节点编排为调度树后进行副本分发,让所有节点的网卡并发传输,磁盘并发写入,减小了副本写入分布式文件系统的时间。性能测试表明,使用该算法的分布式文件系统的写入性能较原始的HDFS更高。

• 单位
  南瑞集团公司(国网电力科学研究院); 国电南瑞科技股份有限公司