该项目提出了一种有效的基于组合设计工具PBD(PairwiseBlockDesign)的数据布局PDL,以加快混合EC分布式存储系统中单节点故障的数据修复。
由于减少了机架间的通信量,并在修复过程中实现了读写I/O的负载平衡,因此它实现了几乎均匀的数据分布以及更高的修复性能。我们设计了数据的放置策略以及相应的故障恢复方案,并且在Hadoop3.1.1中实现了它们。
该项目提出了一种有效的基于组合设计工具PBD(PairwiseBlockDesign)的数据布局PDL,以加快混合EC分布式存储系统中单节点故障的数据修复。
由于减少了机架间的通信量,并在修复过程中实现了读写I/O的负载平衡,因此它实现了几乎均匀的数据分布以及更高的修复性能。我们设计了数据的放置策略以及相应的故障恢复方案,并且在Hadoop3.1.1中实现了它们。
评论