科研之友
微信
新浪微博
Facebook
分享链接
摘要
随着云平台上运行任务的数量急剧增加，任务失败的概率也随之增加，数据的丢失是任务失败的主要原因。如果在任务运行前判断出是否可能发生丢失以及其丢失类型，那么就可以提前采取措施避免或减少损失。该模型基于谷歌在2019年发布的最新云集群数据，对任务的数据丢失问题进行了深入的研究，针对不同任务属性探究其与数据丢失的相关性，并选用了GMM(Gaussian Mixed Model)算法并将其改进来建立数据丢失预测模型。经过多种聚类算法的实验比较，改进后的GMM模型表现出极好的适应性和准确性，能够精准且迅速地在任务运行前判断其发生数据丢失的可能性以及判断其丢失类型。最后根据预测出的不同数据丢失类型，给出了一定的建议。
-
单位数学学院; 福建工程学院; 哈尔滨师范大学
