基于链路带宽的分布式存储系统框架及动态负载均衡技术

发布时间：2018-01-16 09:09

本文关键词：基于链路带宽的分布式存储系统框架及动态负载均衡技术　出处：《北京理工大学学报》2017年09期 　论文类型：期刊论文

【摘要】：针对在节点间进行数据传输、备份等操作时,不同节点间链路带宽将限制分布式存储系统的性能的问题,借鉴软件定义网络及云存储技术的基本思想,通过对控制流与数据流的分离,提出了一种基于链路带宽的分布式存储系统框架及动态负载均衡技术.所提出框架中,在分布式数据节点之外引入一个中心控制节点,该节点掌握全局网络视图,全局网络视图中既包括数据存储表记录存储数据的分布,又包括当前链路带宽情况.在用户读取数据时,根据数据存储表确定需要的数据存放于哪些数据存储节点,指派相应的数据存储节点根据路由表发送数据包,并实时监测网络中的链路带宽负载情况,及时调整数据的传输路径.仿真验证所提架构和算法可以有效解决海量数据在不同位置的分配调度,以及缩短用户对大量数据提取的响应时间及提升存储速率等问题.
[Abstract]:In order to solve the problem that the link bandwidth between different nodes will limit the performance of distributed storage system, the basic idea of software defining network and cloud storage technology is used for reference. Through the separation of control flow and data flow, a distributed storage system framework based on link bandwidth and dynamic load balancing technology are proposed. A central control node is introduced in addition to the distributed data node, which holds the global network view. The global network view includes the distribution of data storage table record storage data. It also includes the current link bandwidth. When the user reads the data, the data storage node is determined according to the data storage table, and the corresponding data storage node is assigned to send the data packet according to the routing table. And real-time monitoring of the link bandwidth load in the network, timely adjust the data transmission path. Simulation results show that the proposed framework and algorithm can effectively solve the allocation of mass data in different locations. It also shortens the response time of users to a large amount of data and increases the storage rate.
【作者单位】：北京理工大学信息与电子学院;中国人民解放军63999部队;
【基金】：国家自然科学基金资助项目(61201192) 国家“八六三”计划项目(2015AA01A706) 空天宽带网络技术协同创新实验室开放基金资助项目北京理工大学基础研究基金资助项目
【分类号】：TP333
【正文快照】： 分布式存储通过集群应用、网络技术及分布式文件系统等功能,将网络中大量各种不同类型的存储节点联合起来协同工作,共同对外提供数据存储和业务访问功能.分布式存储系统与传统存储方式相比,在扩展性,访问难易程度,成本等方面具有非常大的优势[1].在部分典型应用场景中,分布式

【相似文献】