基于HBase的空间数据云存储研究
本文关键词:基于HBase的空间数据云存储研究
更多相关文章: GeoHash HBase 空间查询 并行处理
【摘要】:随着GPS和北斗等定位技术的快速发展,物联网、车联网、移动互联网等基于实时定位技术的应用不断成熟,空间数据呈现井喷式增长。面对互联网环境下数据类型多,更新快,高并发访问等特征,传统的数据管理方式日益难以适应需求。因此,高效的存储和管理空间大数据,成为当下亟待解决的问题。云存储和分布式计算为上述问题的解决提供了一种新的途径。本文针对目前空间数据存储管理方法的不足,利用分布式数据库HBase存储管理海量空间数据,研究了HBase中空间数据的存储模型以及并行处理的关键技术,主要做了以下工作:(1)分析了云平台下HDFS和HBase的架构和技术原理,以及MapReduce计算框架,为云计算环境下空间数据的管理奠定基础。(2)HBase以一维的行键进行查询,而矢量线、面数据包含多个二维的坐标。如何将多个二维的坐标转化一维字符串,就成了HBase存储管理空间首要问题。本文基于GeoHash空间降维算法,探索适合云平台下的空间数据索引方法。(3)结合HBase的NoSQL特性,设计了空间数据在HBase中的存储模型,并利用MapReduce分布式计算框架,给出了矢量线、面的并行化查询流程。最后,通过实验证明,本文设计的基于GeoHash曲线索引的HBase空间数据存储模型,以及并行化查询流程具有良好性能。
【学位授予单位】:河南大学
【学位级别】:硕士
【学位授予年份】:2016
【分类号】:P208
【相似文献】
中国期刊全文数据库 前10条
1 刘瑜,张毅,邬伦;空间数据工程理论框架研究[J];地理与地理信息科学;2003年01期
2 李晓印,张友顺,杨昕,刘爱利;空间数据的“无纸化”管理探讨[J];国土资源科技管理;2004年02期
3 ;《空间数据系统》[J];航天器工程;2005年01期
4 陈俊杰,邹友峰;GIS空间数据质量评价软件设计探讨[J];矿山测量;2005年03期
5 洪志全,叶琳,辛俊,张于峰;GIS空间数据索引技术研究与实现[J];物探化探计算技术;2005年01期
6 胡圣武;张光胜;王宏涛;;空间数据建库研究[J];地球科学与环境学报;2007年02期
7 李伟芬;丁静;苗卿;;空间数据多尺度研究综述[J];电脑知识与技术(学术交流);2007年13期
8 王庆光;;GIS空间数据质量研究[J];水利科技与经济;2007年05期
9 丁滨;夏洪山;;GIS空间数据索引技术研究[J];江苏航空;2007年04期
10 谭红霞;;GIS空间数据的质量探讨[J];山东国土资源;2009年06期
中国重要会议论文全文数据库 前10条
1 汪建光;;空间数据自动批处理技术研究[A];2009全国测绘科技信息交流会暨首届测绘博客征文颁奖论文集[C];2009年
2 杨成韫;荣芳;彭子风;;基于客户/服务器结构的空间数据分布式处理研究[A];新世纪 新机遇 新挑战——知识创新和高新技术产业发展(上册)[C];2001年
3 陈良刚;王海兵;王宇君;施伯乐;;基于约束的空间数据查询[A];第十七届全国数据库学术会议论文集(研究报告篇)[C];2000年
4 陈荦;刘云翔;唐宇;景宁;;基于优先图的空间数据应用服务链建模方法[A];第二十届全国数据库学术会议论文集(研究报告篇)[C];2003年
5 杜红悦;宫辉力;冯克忠;贾建坤;权忠生;;应急救灾空间数据中心建设技术与策略研究[A];第十七届中国遥感大会摘要集[C];2010年
6 李诺夫;黎雷;;网络环境下空间数据的管理[A];地理空间信息技术与应用——中国科协2002年学术年会测绘论文集[C];2002年
7 刘新贵;黄雅娟;;空间数据网络化获取与管理初探[A];中国地理信息系统协会第三次代表大会暨第七届年会论文集[C];2003年
8 廖佳;;基础空间数据生命周期管理[A];地理空间信息技术及其应用论坛论文集[C];2005年
9 叶荣青;吴晓玲;;福建省基础空间数据管理技术研究[A];第四届海峡两岸GIS发展研讨会暨中国GIS协会第十届年会论文集[C];2006年
10 方金云;;空间数据虚拟化的实现技术研究[A];中国地理信息系统协会第九届年会论文集[C];2005年
中国重要报纸全文数据库 前10条
1 宁津生 陈军 晁定波;空间数据质量的主要内涵[N];中国测绘报;2002年
2 李丰丹;“国家地质空间数据网格服务系统”获发明专利[N];中国矿业报;2009年
3 记者 胡其峰;多项空间数据成果向社会开放[N];光明日报;2013年
4 孙昭荣;GIS图穷数字见[N];中国计算机报;2002年
5 宁津生 陈军 晁定波;空间数据的质量控制方法[N];中国测绘报;2002年
6 刘荣梅;中国1∶100万地质图空间数据实现国际共享[N];中国国土资源报;2014年
7 陈拂晓;空间数据:“数字城市”建设的基础[N];中国计算机报;2002年
8 王东华邋罗建军;美国空间数据一站式服务系统[N];中国测绘报;2007年
9 深圳商报记者 董超文;一部手机将可“装”下一座城市[N];深圳商报;2006年
10 中国工程院院士 刘先林;航测为智慧城市建设提供空间数据[N];中国信息化周报;2014年
中国博士学位论文全文数据库 前10条
1 刘义;大规模空间数据的高性能查询处理关键技术研究[D];国防科学技术大学;2013年
2 范建永;基于Hadoop的云GIS若干关键技术研究[D];解放军信息工程大学;2013年
3 马伯宁;空间数据多尺度建模关键技术研究[D];国防科学技术大学;2014年
4 刘伟;基于地理本体的空间数据服务发现与集成[D];中国矿业大学;2010年
5 陈晓斌;基于网格中间件的空间数据访问与集成技术[D];解放军信息工程大学;2012年
6 李世明;林业空间数据平台技术的应用示范研究[D];中国林业科学研究院;2008年
7 郭加树;空间数据仓的构建及应用[D];中国石油大学;2007年
8 桑永胜;空间数据分析的神经计算方法[D];电子科技大学;2010年
9 刘丹;对等计算环境中的空间数据查询定位研究[D];武汉大学;2011年
10 胡茂胜;基于数据中心模式的分布式异构空间数据无缝集成技术研究[D];中国地质大学;2009年
中国硕士学位论文全文数据库 前10条
1 张明佳;空间数据地图模型的原型设计[D];中国地质大学(北京);2015年
2 于海涛;基于AE的油气田地理信息系统的设计与实现[D];中国地质大学(北京);2015年
3 付悦华;基于概念格的空间数据规则提取[D];江西理工大学;2015年
4 项天宋;非洲综合资源环境信息空间可视化系统设计与应用研究[D];福建师范大学;2015年
5 梁杰超;空间数据的访问控制技术研究[D];浙江大学;2015年
6 崔洪博;重庆配电网基础地理信息系统设计与实现[D];电子科技大学;2015年
7 黄正中;空间环境数据处理及可视化交互技术研究[D];电子科技大学;2014年
8 李青岩;Android下的移动空间数据存取方法研究[D];江西理工大学;2015年
9 何拴;基于ArcGIS的黑河中游水资源信息化平台研究[D];兰州大学;2015年
10 李真;海防雷达实训数据管理系统的设计与实现[D];大连海事大学;2015年
,本文编号:1189172
本文链接:https://www.wllwen.com/kejilunwen/dizhicehuilunwen/1189172.html