并行处理技术在地理信息数据处理中的应用

发布时间：2017-08-09 07:15

  本文关键词：并行处理技术在地理信息数据处理中的应用

  更多相关文章： 并行处理 MapReduce框架 主服务器集群 并行矢量数据模型 数据切片

【摘要】：随着地理信息存储量的飞速增长,传统的单进程、集中式的数据处理方式已不能满足基于网络的地理信息服务的效能要求。分析对比了OpenMP,MPI和MapReduce等主流并行编程模式,将关系型数据库与分布式空间数据管理系统相结合,提出了面向并行处理的地理信息存储模型和数据组织模型,将该模型与传统模型进行了对比分析,并基于MapReduce实现了地理空间数据并行处理框架,选取了矢量数据装载、影像数据装载以及数据切片作为典型数据处理案例开展对比实验,该技术方案的处理效率均数倍于传统技术方案。实验表明,该模型能够很好地支持并行处理框架,可为分布式环境下数据处理中心构建提供一个有效解决方案。
【作者单位】： 信息工程大学;地理信息工程国家重点实验室;西安测绘研究所;
【关键词】： 并行处理 MapReduce框架 主服务器集群 并行矢量数据模型 数据切片
【基金】：国家自然科学基金项目(41201469)
【分类号】：P208
【正文快照】： 随着传感器技术和数据获取手段的不断发展,影像数据的分辨率越来越高,实景数据等新型地理信息产品不断涌现,随之而来的是数据存储量呈级数增长所带来的地理信息快速处理难题。地理信息处理主要包括数据格式转换、坐标系统转换、分辨率转换、数据压缩、数据切片、空间索引创建

【相似文献】

中国期刊全文数据库 前10条

1 张德富;时桂发;李滨宇;;并行处理计算机中存贮分配的几个问题[J];南京大学学报(自然科学版);1985年04期

2 ;复旦大学并行处理研究所[J];高技术通讯;1997年10期

3 吴沧浦;系统优化方法中的并行处理与神经网络技术[J];控制理论与应用;1992年03期

4 田学文;并行处理计算机发展趋势[J];科学中国人;1996年05期

5 吴婧瑾;吉家成;;美国伊利诺伊理工大学《并行处理》实验教学探析[J];实验科学与技术;2013年06期

6 陈付龙,李明东;基于LAN的并行处理[J];四川师范学院学报(自然科学版);2003年01期

7 崔学群;;并行处理在石油勘探开发中的应用(连载)[J];国外油气勘探;1994年04期

8 巫小蓉,朱珍民;PVM特性(英文)[J];常德师范学院学报(自然科学版);2002年03期

9 樊兴;张国平;夏学知;;一种实现动态负载均衡的多机情报并行处理方法[J];解放军理工大学学报(自然科学版);2009年06期

10 雷树梁;系统并行处理的集合分解方法[J];上海航天;1991年01期

中国重要会议论文全文数据库 前10条

1 张校辉;赵昕;谈满堂;;流量特性在降低线卡并行处理需求中的应用[A];2009年全国开放式分布与并行计算机学术会议论文集(下册)[C];2009年

2 吴刚;杨梦冬;;RDF数据的并行处理及性能评价[A];第26届中国数据库学术会议论文集（B辑）[C];2009年

3 鲍平安;陈辉堂;;基于Petri网的并行处理模型[A];1997中国控制与决策学术年会论文集[C];1997年

4 何伟;崔立真;李保栋;;面向实时ROLAP应用的并行处理方法[A];第29届中国数据库学术会议论文集（B辑）（NDBC2012）[C];2012年

5 丁云霞;胡善清;龙腾;;典型SAR算法在多核处理器上并行处理映射实现[A];第六届全国信号和智能信息处理与应用学术会议论文集[C];2012年

6 崔阳;吕志平;陈正生;王宇谱;吕浩;;GNSS数据的并行处理研究[A];第四届中国卫星导航学术年会论文集-S8卫星导航模型与方法[C];2013年

7 赵宇亮;姚益平;;PDES同步控制多核并行处理研究[A];2009系统仿真技术及其应用学术会议论文集[C];2009年

8 薛永生;黄震华;段江娇;张延松;吕晓华;;一种并行处理多维连接和聚集操作的有效方法[A];第二十一届中国数据库学术会议论文集（研究报告篇）[C];2004年

9 杨敏;;基于mpi常用海洋数值模式并行处理的研究[A];中国高等教育学会教育信息化分会第十次学术年会论文集[C];2010年

10 张国珍;;CAD／CAPP集成与工艺文件并行处理的研究[A];12省区市机械工程学会2006年学术年会湖北省论文集[C];2006年

中国重要报纸全文数据库 前2条

1 ;高效数据库并行处理功能[N];计算机世界;2002年

2 本报驻华盛顿记者 张孟军;善用闲置科技资源也是创新[N];科技日报;2002年

中国博士学位论文全文数据库 前3条

1 刘峰;仪用主从耦合分布式并行处理容错系统体系结构研究[D];浙江大学;2003年

2 王少荣;电力系统分布式广域同步并行处理平台研究[D];华中科技大学;2004年

3 杨靖宇;摄影测量数据GPU并行处理若干关键技术研究[D];解放军信息工程大学;2011年

中国硕士学位论文全文数据库 前10条

1 张伟新;基于异构计算的IPv4/IPv6互通并行处理技术研究[D];华南理工大学;2015年

2 李杰;面向领域的私有云并行处理模型研究[D];中国石油大学(华东);2014年

3 李聪欣;基于多核DSP的大前斜SAR并行实时处理技术研究[D];北京理工大学;2016年

4 汪晨;嵌入式鱼眼视频校正方案的设计与实现[D];东南大学;2015年

5 徐彬彬;面向迭代作业的分布式并行处理优化与实现[D];华中科技大学;2014年

6 马倩;基于SYS/BIOS的弹载SAR并行处理研究[D];西安电子科技大学;2015年

7 李想;气象卫星监测数据报文并行处理关键技术研究[D];河南大学;2016年

8 王美;粒子滤波并行处理的算法研究[D];西安电子科技大学;2014年

9 蔡蓓;SAR数据地面并行处理硬件系统的设计与实现[D];中国科学院大学（工程管理与信息技术学院）;2014年

10 谢励;多DSP并行处理模件研究[D];华中科技大学;2007年

，

本文编号：644035