面向纠删码的低成本多节点失效修复方法
本文关键词: 分布式存储 纠删码 修复开销 修复时间 多节点失效 出处:《计算机工程》2017年07期 论文类型:期刊论文
【摘要】:针对现有纠删码修复方法开销大、效率低的问题,提出一种低成本多点失效修复方法。通过基于网路距离的节点选择算法增加节点之间的可用带宽,采用多线程以及流水线的数据传输方法提高多节点失效修复效率,同时使用基于中心节点的多点修复方法降低多节点失效修复开销。实验结果表明,与基于星型结构的串行修复策略、基于树型结构的串行修复策略和最小存储再生码相比,该方法多点修复效率较高,平均修复时间分别减少了25%,16%和20%。
[Abstract]:Aiming at the problem of high cost and low efficiency of existing erasure repair methods, a low cost multipoint failure repair method is proposed, which increases the available bandwidth between nodes by node selection algorithm based on network distance. Multi-thread and pipeline's data transmission method are used to improve the efficiency of multi-node failure repair, and the central node based multi-point repair method is used to reduce the cost of multi-node failure repair. The experimental results show that. Compared with the serial repair strategy based on star structure, the serial repair strategy based on tree structure and the minimum memory regenerative code, this method is more efficient and the average repair time is reduced by 25% respectively. 16% and 20.
【作者单位】: 武警警官学院电子技术系;武警警官学院科研部;
【基金】:国家“973”计划项目“高效可信的虚拟计算环境基础研究”(2011CB302601)
【分类号】:TP333
【正文快照】: 中文引用格式:郑力明,李晓冬.面向纠删码的低成本多节点失效修复方法[J].计算机工程,2017,43(7):110-118,123.英文引用格式:Zheng Liming,Li Xiaodong.Low-cost Multi-node Failure Repair Method for Erasure Codes[J].Computer Engineering,2017,43(7):110-118,123.0概述随
【参考文献】
相关期刊论文 前7条
1 罗军;陈仕强;;基于支持向量机的HDFS副本放置改进策略[J];计算机工程;2015年11期
2 李晨卉;;应用于分布式存储系统的准循环再生码构造方案[J];计算机工程;2015年03期
3 许方亮;王意洁;裴晓强;;NTar:基于网络拓扑的纠删码树型修复方法[J];计算机研究与发展;2013年S2期
4 林菲;张万军;孙勇;;一种分布式非结构化数据副本管理模型[J];计算机工程;2013年04期
5 罗象宏;舒继武;;存储系统中的纠删码研究综述[J];计算机研究与发展;2012年01期
6 刘昀昊;张敏情;杨晓元;;基于RS码的错误容忍存储方案[J];计算机工程;2010年14期
7 谭子军;何连跃;;分布式存储系统中用户磁盘空间分配策略[J];计算机工程;2010年09期
【共引文献】
相关期刊论文 前10条
1 吴修国;;云存储系统中基于动态规划的最小开销数据副本布局研究[J];计算机工程;2017年07期
2 郑力明;李晓冬;;面向纠删码的低成本多节点失效修复方法[J];计算机工程;2017年07期
3 徐志强;袁德砦;陈亮;;基于稀疏随机矩阵的再生码构造方法[J];计算机应用;2017年07期
4 吴炀;付印金;陈卫卫;倪桂强;;一种高效的混合内存布局机制与编码技术[J];计算机科学;2017年06期
5 吴昊;赖成U,
本文编号:1484729
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/1484729.html