科研之友
微信
新浪微博
Facebook
分享链接
摘要
大数据时代下,数据量的增长速度会超过储存数据介质容量的增长速度,那么储存代价会不断上升,储存介质的成本在不断增加。面对这种巨大的数据生成量传统数据管理系统中的数据处理技术受到了极大挑战。如何更高效,稳定的储存这些数据成为数数据处理等许多领域研究的热点。本文从范德蒙行列式出发,利用范德蒙码以及范德蒙行列式特有的运算性质,优化并拓展了大数据时代最常见的动态分布式文件系统HDFS,将其优化为VanDHDFS。利用范德蒙列阵纠删码的灵活性、高精准度特性,配合HDFS的可恢复性,打造出一个具有严格统一性与可恢复性的大数据储存系统。
- 单位
