基于云计算的GIS数据存储管理研究
本文关键词:基于云计算的GIS数据存储管理研究,由笔耕文化传播整理发布。
【摘要】:地理信息系统即GIS是当今社会的一个讨论热点,人们对地理信息的重视程度也与日俱增,而面对海量的地理信息数据,如何对它们进行妥善的存储和管理则成了如今的一个热门问题。与此同时,云计算技术的发展则给了这个问题一个较为合理的且认同度较高的解决方法。将GIS数据存储于云平台当中,不仅成本低廉,且安全性较高,与此同时,对于海量的GIS数据,利用云计算技术进行处理,其效率也比在单机平台上处理要高出许多。本文主要运用时下非常热门的云平台Hadoop来讨论对GIS数据的存储与管理,但由于GIS数据的特性,并不适合将其直接存储于Hadoop之中,因此本文主要讨论开源GIS数据的三种主要格式在Hadoop中的存储与管理。第一是影像数据,对于影像数据,我们采用Key-Value的图像数据存储模型,将影像数据存入HBase当中,并根据HBase的特点对其建立索引,提高管理效率;第二类数据是地理空间信息数据即兴趣点数据,由于其特点较为契合HBase数据库,因此我们只需采用分词工具对其进行处理,并建立空间索引既可;最后一类也是难点所在的瓦片数据,由于Hadoop不适合存储类似瓦片数据的小文件,因此我们利用SquenceFiles工具对瓦片数据进行打包,同时根据瓦片数据的地理位置,利用Hilbert算法对瓦片数据编码组织,从而提高瓦片数据的查询效率,最后根据瓦片数据的层级以及其编码存入HBase中,并建立索引。
【关键词】:GIS Hadoop 云计算 瓦片数据 Hilbert
【学位授予单位】:合肥工业大学
【学位级别】:硕士
【学位授予年份】:2016
【分类号】:P208
【目录】:
- 致谢7-8
- 摘要8-9
- abstract9-13
- 1. 绪论13-19
- 1.1. 研究背景与意义13-15
- 1.1.1. 研究背景13-14
- 1.1.2. 研究意义14-15
- 1.2. 国内外研究现状15-18
- 1.2.1. 云计算研究现状15-16
- 1.2.2. 开源GIS研究现状16-18
- 1.3. 研究内容与论文结构18-19
- 2. GIS数据介绍19-24
- 2.1 GIS数据类型分析19-22
- 2.1.1. 影像数据类型分析19
- 2.1.2. 瓦片数据分析19-20
- 2.1.3. 空间信息数据分析20
- 2.1.4. 关键技术及难点20-22
- 2.2. 云GIS总体平台架构22-24
- 3. 基于Hadoop的各类数据管理24-33
- 3.1. Hadoop介绍24-26
- 3.1.1. Hadoop2.024-25
- 3.1.2. HBase介绍25-26
- 3.2. Hadoop集群部署26-27
- 3.3. 海量影像数据的存储与发布27-29
- 3.3.1. 海量影像数据的云存储27-28
- 3.3.2. 影像数据的并行出入库管理28-29
- 3.4. 地理空间信息数据存储与检索29-30
- 3.5. 地图瓦片数据的存储与发布30-33
- 4. 瓦片数据的管理33-42
- 4.1. 瓦片数据的打包33-35
- 4.1.1. Hadoop与小文件33
- 4.1.2. 打包方法讨论33-35
- 4.2. 基于HBase的索引查询35-40
- 4.2.1. 主要问题35-36
- 4.2.2. 原理36-37
- 4.2.3. 架构37-39
- 4.2.4. 应用39-40
- 4.3. 瓦片数据的组织方法40-42
- 5. 基于Hilbert的瓦片数据组织方法42-47
- 5.1. Hilbert曲线介绍42-43
- 5.1.1. Hilbert曲线的产生42
- 5.1.2. Hilbert曲线的意义42-43
- 5.2. Hilbert曲线的生成43-44
- 5.3. Hilbert编码44-47
- 5.3.1. Hilbert编码的生成44-45
- 5.3.2. Hilbert编码与瓦片数据的结合45
- 5.3.3. Hilbert编码的实现45-47
- 6. 结论与展望47-50
- 6.1. 全文总结47
- 6.2. 创新及展望47-50
- 6.2.1. 创新47-48
- 6.2.2. 展望48-50
- 参考文献50-53
【相似文献】
中国期刊全文数据库 前10条
1 李晓辉;王淑艳;;大数据及其挑战[J];科技风;2012年23期
2 金保印;;迎接“大数据”时代[J];民营科技;2013年03期
3 尤文辰;徐跃通;高尚;;浅析GIS大数据[J];电脑知识与技术;2013年24期
4 李湘;王甫棣;姜立鹏;祝婷;;WIS的实现技术研究及应用[J];气象;2011年10期
5 顾基发;;大数据要注意的一些问题[J];科技促进发展;2014年01期
6 冯杭建;高锡章;;中国海岸带及近海观测数据多维动态表达[J];浙江大学学报(理学版);2010年04期
7 包达尔罕;罗敏;刘智伟;赵静;;大数据及其应用技术探讨[J];内蒙古民族大学学报(自然科学版);2014年02期
8 梁建宏;杨辉;邹立晔;代光辉;;IRIS DMC的数据服务[J];国际地震动态;2006年11期
9 张峰;;基于多源异构勘察数据的工程勘察信息系统的设计与实现[J];测绘通报;2013年01期
10 许晔;;大数据时代来袭 中国宜加紧布局[J];创新科技;2014年01期
中国重要会议论文全文数据库 前4条
1 李田;郭利;冯鹏;;某型导弹单元设备自动检测系统软件设计[A];全国第十五届计算机科学与技术应用学术会议论文集[C];2003年
2 高世光;邓苏;王长缨;;关于ADO+引导数据种类的演变的研究[A];第十八届全国数据库学术会议论文集(技术报告篇)[C];2001年
3 颜涯;邵佩英;;GIS与MIS系统集成技术在城市规划中的应用[A];第十七届全国数据库学术会议论文集(研究报告篇)[C];2000年
4 谢国忠;;大数据时代下的企业管理与创新[A];创新驱动:新机遇 新挑战——2013年全国企业管理创新大会资料汇编[C];2013年
中国重要报纸全文数据库 前10条
1 中国科学技术发展战略研究院 许晔;大数据时代来袭 中国宜加紧布局[N];经济参考报;2013年
2 记者 李成成;崭露头角的大数据时代[N];企业家日报;2013年
3 ;精简企业数据是时候了[N];计算机世界;2008年
4 光大证券;“大数据”或成重要投资主线[N];中国证券报;2012年
5 本报记者 郭涛 李奕;与大数据打交道的那些人[N];中国计算机报;2012年
6 本报记者 齐洁;大数据蕴藏创业空间[N];中国经营报;2012年
7 吴勇毅;大数据“热”下的“冷”思考[N];中国冶金报;2012年
8 抚苏;众望所归,,大数据时代来临[N];电脑报;2013年
9 《网络世界》记者 于翔;大数据的价值实现之旅[N];网络世界;2013年
10 本报记者 孙琦子;这些年,一起忽悠着的“大数据”[N];经济观察报;2013年
中国博士学位论文全文数据库 前5条
1 张兰廷;大数据的社会价值与战略选择[D];中共中央党校;2014年
2 李琦;基于多源数据的交通状态监测与预测方法研究[D];吉林大学;2013年
3 张新;区域性防灾减灾信息服务体系研究[D];中国科学院研究生院(遥感应用研究所);2006年
4 李智慧;基于可视化的三维放射治疗计算机模拟系统的研究[D];四川大学;2002年
5 袁培森;基于LSH的Web数据相似性查询研究[D];复旦大学;2011年
中国硕士学位论文全文数据库 前10条
1 郭铭;大数据时代包头公安基础信息化建设研究[D];内蒙古大学;2015年
2 贾同;大数据对高等教育发展的推动研究[D];西南大学;2015年
3 张靖雯;基于GPS路网的重卡动力参数分析系统开发[D];长安大学;2015年
4 张辉;基于移动互联网的高速公路公众信息服务系统分析与研究[D];长安大学;2015年
5 邓先明;基于西安市矿产资源规划关系数据库的数据质量控制研究[D];长安大学;2015年
6 魏亚红;流式数据的并行分类算法研究[D];曲阜师范大学;2015年
7 黄成鹏;大数据时代的个人隐私[D];华中师范大学;2015年
8 霍美娜;基于Hadoop海量数据分析的反腐云计算设计与实现[D];山东大学;2015年
9 朱迪;云计算在电力系统中的应用研究[D];华北电力大学;2015年
10 程彬彬;基于Hadoop的气温数据组织及时空分异特征提取方法研究[D];南京师范大学;2015年
本文关键词:基于云计算的GIS数据存储管理研究,由笔耕文化传播整理发布。
本文编号:450039
本文链接:https://www.wllwen.com/kejilunwen/dizhicehuilunwen/450039.html