大规模高校纠删码键值存储读写负载均衡研究

发布时间：2022-08-01 18:47

　　纠删码广泛部署于分布式键值存储系统来保证数据可靠性.通过将用户数据编码并存储到多个存储节点,纠删码存储系统可以在部分节点失效的情况下恢复原始数据.随着存储节点数量的增加,存储节点往往会出现负载不均衡的情况,限制其在高校云计算和信息化领域的应用场景.为解决上述问题,提出大规模纠删码键值存储系统负载均衡方案.通过将逻辑控制和存储功能分离,纠删码存储系统可以高效地确定存储节点的负载状态.为充分利用节点之间网络带宽资源,提出多切片数据编码传输方案.根据用户写入数据量,设计混合数据写入机制来提升数据写入操作的性能.在此基础上,设计了原型纠删码键值存储系统,实际原型系统测试验证了本研究中负载均衡算法的有效性. 

【文章页数】：9 页

【文章目录】：
1 纠删码存储系统研究现状概述
    1.1 纠删码读写过程介绍
    1.2 纠删码存储系统性能优化相关工作
    1.3 纠删码存储系统负载均衡问题
2 读写性能测量和研究动机
    2.1 测试实验设置
    2.2 测试结果分析
    2.3 读写时延对存储系统的影响
3 纠删码存储结构优化
    3.1 逻辑控制和存储资源分离的软件架构
    3.2 逻辑控制节点数据写入过程
    3.3 数据读取过程
4 数据写入过程的负载均衡算法
    4.1 多切片数据编码传输方案
    4.2 基于数据量的混合数据写入方案
    4.3 原型纠删码键值存储系统实现
5 实验验证
    5.1 实验设置
    5.2 性能分析
    5.3 可扩展性分析
结 语


【参考文献】：
期刊论文
[1]适应冷热数据存储的多编码架构的设计与实证[J]. 魏学才,宫庆媛,沈佳杰,周扬帆,王新.  计算机应用与软件. 2017(02)



本文编号：3667982