当前位置:主页 > 科技论文 > 测绘论文 >

基于NoSQL数据库的空间大数据分布式存储策略

发布时间:2018-03-20 00:00

  本文选题:空间数据库 切入点:大数据 出处:《武汉大学学报(信息科学版)》2017年02期  论文类型:期刊论文


【摘要】:基于关系型数据库的空间数据存储与处理是地理信息系统(geographic information system,GIS)领域的主流模式,但伴随着物联网、移动互联网、云计算及空间数据采集技术的发展,空间数据已从海量特征转变为大数据特征,对空间数据的存储和管理在数据量和处理模式上提出了新的挑战。首先分析了基于传统的集中式存储与管理模式在处理和应用大数据方面的局限性,包括存储对象的适应性、存储能力的可扩展性及高并发处理能力要求;然后在分析当前几大主流NoSQL数据库特点的基础上,指出了空间大数据基于NoSQL数据库的单一存储模式在数据操作方式、查询方式和数据高效管理方面存在的局限性;最后结合GIS领域空间大数据存储对数据库存储能力的可扩展性及数据处理和访问的高并发要求,提出基于内存数据库和NoSQL数据库的空间大数据分布式存储与综合处理策略,并开发了原型系统对提出的存储策略进行可行性和有效性进行了验证。
[Abstract]:The spatial data storage and processing of relational database based on geographic information system (geographic information system, GIS) the mainstream mode field, but with the Internet, mobile Internet, cloud computing and data acquisition technology development space, spatial data has changed from the mass characteristics for large data characteristics, storage and management of spatial data put forward the new challenge in the amount of data and processing mode. Firstly analyzes the centralized storage and management mode based on the traditional processing and application in terms of data limitations, including storage object adaptation, storage capacity scalability and high concurrent processing capability; then based on the analysis of the current several mainstream NoSQL the characteristics of the database, it points out that the big data storage model based on single NoSQL database in the data operation, query and data management efficiency The limitations of the high concurrent with GIS; finally the field of big data storage space of database storage capacity scalability and data processing and access requirements, the space data of distributed memory database and NoSQL database and comprehensive treatment strategies based on, and develop a prototype system of the feasibility and effectiveness of the verification of the storage strategy put forward.

【作者单位】: 中国科学院地理科学与资源研究所;环境保护部卫星环境应用中心;北京超图软件股份有限公司;
【基金】:国家自然科学青年基金(51309210)~~
【分类号】:P208

【相似文献】

相关期刊论文 前9条

1 崔忠强;左德承;张展;;在云间可重构的分布式存储[J];系统工程理论与实践;2011年S2期

2 孟凡荣;;浅谈基于云计算的GIS[J];科技创新与应用;2013年19期

3 黎平国;陈路平;陈红琴;蒋若珊;;基于P2P的数字图书馆资源分布式存储方案[J];科技广场;2009年05期

4 范建永;龙明;熊伟;;基于HBase的矢量空间数据分布式存储研究[J];地理与地理信息科学;2012年05期

5 廖桂兰;;浅析P2P分布式数据存储[J];科技风;2011年15期

6 李宏伟;分布式存储环境下的加性Schwarz方法[J];数值计算与计算机应用;2004年01期

7 单士华;曹社香;;基于Hadoop处理大数据分析[J];创新科技;2013年12期

8 李太全;肖柏勋;;求解三对角线性方程组的迭代对角占优算法[J];计算机应用;2012年10期

9 ;[J];;年期

相关会议论文 前7条

1 苏李亮;王云福;侯斌;;海量设计文档分布式存储及负载均衡的研究与实现[A];2013电力行业信息化年会论文集[C];2013年

2 苏李亮;王云福;侯斌;;海量设计文档分布式存储及负载均衡的研究与实现[A];2013电力行业信息化年会论文集[C];2013年

3 郑文武;李先绪;黄植勤;邱红飞;;云存储关键技术[A];2012全国无线及移动通信学术大会论文集(下)[C];2012年

4 蒋轶林;郭淑琴;;分布式存储在数字集群移动通信系统中的应用[A];浙江省电子学会2013学术年会论文集[C];2013年

5 姜继忱;陈钢;;P2P之路——缔造“分布式对等”的Internet3.0[A];全面建设小康社会:中国科技工作者的历史责任——中国科协2003年学术年会论文集(下)[C];2003年

6 付伟;肖侬;卢锡城;;QoS感知的副本放置问题研究综述[A];第15届全国信息存储技术学术会议论文集[C];2008年

7 张彦;刘欣然;徐慧彬;;一种基于虚拟计算环境的分布式存储体系结构[A];2009全国计算机网络与通信学术会议论文集[C];2009年

相关重要报纸文章 前8条

1 京东架构委员会主任 云平台首席架构师 系统技术部负责人 刘海锋;京东:分布式存储体系成为业务基石[N];中国信息化周报;2014年

2 《网络世界》记者 于翔;京东分布式存储体系研发历程[N];网络世界;2014年

3 《网络世界》记者 于翔;融合一体机投入大规模商用[N];网络世界;2013年

4 记者 余荣华;大数据,催生大变革[N];人民日报;2014年

5 本报记者 张佳星;新生产业布局如何“云”中索骥[N];科技日报;2014年

6 本报记者 甘露;物联网让管理更美妙[N];计算机世界;2013年

7 本报记者 郭涛;华为帮用户定制HANA一体机[N];中国计算机报;2013年

8 临江;手机浏览器,3G时代的采矿机?[N];人民邮电;2009年

相关博士学位论文 前9条

1 吴思;容错分布式存储系统扩容机制研究[D];中国科学技术大学;2016年

2 胡q,

本文编号:1636582


资料下载
论文发表

本文链接:https://www.wllwen.com/kejilunwen/dizhicehuilunwen/1636582.html


Copyright(c)文论论文网All Rights Reserved | 网站地图 |

版权申明:资料由用户746e6***提供,本站仅收录摘要或目录,作者需要删除请E-mail邮箱bigeng88@qq.com