集群环境下分布式索引的实现

发布时间：2017-07-30 07:15

  本文关键词：集群环境下分布式索引的实现

  更多相关文章： 分布式存储 分布式索引 辅助索引 索引维护 OceanBase

【摘要】：针对分布式存储系统上使用非主键访问数据带来的性能问题,探讨在分布式存储系统上实现索引的相关关键技术。在充分分析分布式存储特征的基础上,提出了分布式索引设计和实现的关键点,并结合分布式存储系统的特点及相关的索引技术,讨论了索引的组织形式、索引的维护和数据一致性等问题;然后基于如上的分析,选择在分布式数据库系统OceanBase开源版本上,设计和实现分布式索引机制,并通过基准测试工具YCSB进行性能测试。实验结果表明,虽然辅助索引会对系统性能产生影响,但因为充分考虑了系统特征及存储特点,在不同数据规模下,该索引都能够将性能影响控制在5%以内。另外,使用冗余列的方式,能进一步将该索引的性能提升100%。
【作者单位】： 华东师范大学数据科学与工程研究院;浙江理工大学经济管理学院;
【关键词】： 分布式存储 分布式索引 辅助索引 索引维护 OceanBase
【基金】：浙江省自然科学基金资助项目(LY12F02044) 国家自然科学基金重点项目(U1401256)~~
【分类号】：TP311.133.1
【正文快照】： 0引言为了能够响应和处理互联网级的访问负载,越来越多的应用开始使用基于分布式存储的数据库系统。这些系统的一个共同特征是将数据分片后冗余存储在集群中的多个节点上,从而保证系统的扩展性、可靠性和可用性。按记录主键划分数据是数据分片的主要方式。通过主键属性能够快

【参考文献】

中国期刊全文数据库 前1条

1 阳振坤;;OceanBase关系数据库架构[J];华东师范大学学报(自然科学版);2014年05期

【共引文献】

中国期刊全文数据库 前1条

1 张晨东;郭进伟;刘柏众;储佳佳;周敏奇;钱卫宁;;基于Raft一致性协议的高可用性实现[J];华东师范大学学报(自然科学版);2015年05期

中国硕士学位论文全文数据库 前1条

1 李永峰;面向海量金融数据并行加载技术研究与实现[D];华东师范大学;2015年

【相似文献】

中国期刊全文数据库 前10条

1 何公明;张元涛;;面向数字媒体的高性能分布式存储系统的研究与应用[J];广播电视信息;2009年10期

2 范剑波,郭建康;分布式存储系统性能模型的建立与应用[J];计算机工程与应用;2001年13期

3 范剑波,徐利浩;分布式存储系统可靠性的研究[J];计算机工程;2001年06期

4 吴英;谢广军;刘t，

本文编号：593010