基于多卷服务器的块级别云存储系统的关键技术研究

发布时间：2020-03-13 21:34

【摘要】：随着互联网技术的不断发展与成熟，云计算技术已经成为新一轮IT信息技术革命浪潮中研究的热点。云计算已经不仅仅走进了我们的生活，而且还开始扮演着重要的角色。在过去的几年中，由于互联网中的信息量爆炸式地增长，作为云计算概念的延伸和发展——云存储技术已开始受到越来越多的企业和高校的关注。人们迫切地想利用这门新兴技术来更好地存储和管理不断增长的数据。如今，云存储相关的技术发展迅速，国内外产品层出不穷。云存储技术具有良好的研究前景和研究价值。 块级别云存储是云存储系统中的一个重要分支，由于它可以提供给用户原始的块存储设备，因此块级别云存储系统在许多领域都有较广泛的应用。本文在分析、研究和比较国内外主流的块级别云存储系统的优缺点后，在Orthrus系统原型之上，对其存在的缺乏细化统一管理异构存储设备、负载均衡局部最优以及断点重传等问题上提出了改进策略，设计并实现了基于负载均衡的多卷服务器块级别分级云存储系统Orthrus Plus。 首先，介绍了云存储技术目前的发展状况，讨论了Orthrus Plus系统实现过程中所涉及到的相关技术。 其次，设计并实现了Orthrus Plus系统的多卷服务器架构及其存储工作流。系统使用CLVM让卷服务器集群共同管理后端存储池，使用Xen和KVM虚拟化技术来管理用户虚拟机，利用iSCSI技术为用户虚拟机提供块级别存储的连接访问服务，，通过web service技术来实现各节点中模块接口的相互调用。同时，利用现有的异构存储环境，提出了一种基于卷生命周期的分级存储管理机制，充分利用不同存储设备的优势和特点，进一步提高系统访问效率。实验证明，实行分级存储管理的Orthrus Plus系统较Orthrus系统有更高的读写性能，在I/O吞吐率上提高了36%左右。 然后，在对卷服务器性能和负载进行建模的基础上，实现了基于遗传算法的负载均衡策略。该负载均衡策略采用了交叉率自适应模型，尽可能地提高了其搜索全局最优解的准确性。同时，设计了一种面向iSCSI的断点续传功能，在重新选择卷服务器进行iSCSI重连时，正在上传数据的用户无需将数据重新上传，系统自动会从断点处继续上传。实验证明，Orthrus Plus系统中使用的负载均衡策略在较大数据量时，较Orthrus更可靠更高效。 最后，对本文在块级别云存储系统中所做的主要工作和贡献进行了总结，并对Orthrus Plus系统未来工作的方向提出了几点展望。
【图文】：

由表4.1和图4.9中可以看到，由于iSCSI连接包含了VMM与卷服务器的连VMM将卷挂载到虚拟机上的时间，因此，该过程占了较多的时间开销。个方面来看，虽然iSCSI的断开连接耗时比重相对较大，但是从时间量化也仅仅用了1.5秒，应该在用户可以接受的范围之内。因此，整个断点续起的额外开销与数据重传导致的时间消耗相比，具有一定优势。表 4.1 iSCSI 断点续传实验结果iSCSI 断开重选卷服务器iSCSI 连接断点计算文件传输时间其他时间断点传总间开ms）158.7 1.3 1228.4 0.1 9986.8 142.6 1151iSCSI断开1%iSCSI连接11%其他时间1%断点续传中各环节开销比重
【学位授予单位】：杭州电子科技大学
【学位级别】：硕士
【学位授予年份】：2013
【分类号】：TP333

【参考文献】

相关期刊论文 前1条

1 彭聪;陕振;张淑萍;李俊;;iSCSI存储系统中缓存技术的研究[J];计算机工程与设计;2010年10期

本文编号：2586829