基于堆叠式分布式文件系统的端到端校验

作者：李诗逸; 古亮; 喻之斌

来源：集成技术, 2019, 8(05): 13-25.

DOI：10.12146/j.issn.2095-3135.20190729002

• 静默错误
• 数据完整性
• 端到端校验
• 分布式文件系统

端到端校验是一种有效的数据完整性检测手段,可为分布式存储系统提供基本的可靠性保证。Glusterfs是一种常用的堆叠式分布式文件系统,但缺乏有效的数据完整性检测机制,存在用户数据遭受破坏而无法被发现的风险,即返回错误数据给用户。这种风险在某些情况还会扩散,造成多副本或灾备、双活情况下的数据丢失。针对这一问题,该文提出了一种高性价比的基于Glusterfs的端到端校验方案(命名为Glusterfs-E2E),可以有效解决Glusterfs文件系统中存在的数据完整性风险。该方案不但可以提供全路径的保护,具备2%～8%的高性能开销,而且还可以提供软件故障的定位功能。

• 单位
  中国科学院深圳先进技术研究院; 深信服科技股份有限公司