遥感数据分布式共享架构的研究与应用

发布时间：2017-06-24 15:11

  本文关键词：遥感数据分布式共享架构的研究与应用，由笔耕文化传播整理发布。

【摘要】：随着高分系列卫星投入使用,广大用户对卫星数据的应用需求越来越迫切,用户量也越来越多。遥感数据分发中心需要提高对外分发能力才能应对日益增长的数据分发请求。因为遥感数据分发中心的网络带宽有限,为此本文讨论了“遥感信息网络化系统”的改进方案,提出了几种方案以缓解分发中心压力。方案一通过构建资源镜像分发中心的方式缓解数据分发中心的网络压力,使镜像分发中心构成镜像集群,由集群共同处理分发任务。方案二通过将所有板块节点改成对等点缓解数据分发中心网络压力,板块节点上的缓存数据将在系统中共享。本文针对两种改进方案设计了镜像集群和缓存集群。并根据数据存储由近到远提交请求、根据网络速度由快到慢传输方式。论文主要工作成果如下:1.改进系统架构,分析现有系统架构中数据传输的瓶颈问题。针对现有架构以及遥感影像重复使用率低的特点提出了使用分发中心和板块中心为数据源的方式减轻单数据源的传输压力。2.构建镜像集群,研究镜像分发中心以及镜像集群,构造了数据公共任务队列。使用中心任务库管理集群任务,使集群能协同处理数据推送任务,减轻单数据分发中心的数据推送压力。3.构建资源镜像映射规则,采用镜像映射规则定制镜像数据,使镜像的分布更能切合区域应用的需要。并使用镜像公共推送队列的方式将镜像分散的传输到对应的镜像分发中心。4.构建缓存集群,利用板块FTP缓存数据构建缓存集群,缓存集群传输任务中提出依据端到端传输速率动态调整数据源的方式,加快当前传输任务处理速度。
【关键词】：遥感数据 数据推送 资源镜像 传输速率
【学位授予单位】：河南大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP79
【目录】：

• 摘要4-5
• ABSTRACT5-10
• 1 绪论10-16
• 1.1 选题背景10-11
• 1.2 国内外研究现状11-13
• 1.3 论文的主要工作13-14
• 1.4 论文结构14-16
• 2 相关技术介绍16-20
• 2.1 文件数据传输相关概念16-18
• 2.1.1 文件传输介绍16
• 2.1.2 网络文件传输16-18
• 2.2 加速传输技术18-20
• 2.2.1 单服务器客户端多线程18
• 2.2.2 多服务器客户端多线程18-19
• 2.2.3 对等网络19
• 2.2.4 内容分发网络19-20
• 3 遥感数据共享架构的研究与改进20-30
• 3.1 现有系统现状与分析20-23
• 3.1.1 现有系统架构介绍20-22
• 3.1.2 系统现状分析22-23
• 3.2 改进方案23-28
• 3.2.1 扩展分发中心为数据源24-25
• 3.2.2 扩展板块中心为数据源25
• 3.2.3 对等点的选择25-26
• 3.2.4 改进后架构的组成26-28
• 3.2.5 改进需要做的工作28
• 3.3 本章小结28-30
• 4 关键策略和算法的研究与构造30-42
• 4.1 镜像集群推送任务策略30-32
• 4.1.1 私有任务队列30
• 4.1.2 公共任务队列30-32
• 4.2 镜像数据传输32-37
• 4.2.1 镜像数据映射33
• 4.2.2 新数据的录入33-34
• 4.2.3 镜像数据推送算法34-35
• 4.2.4 镜像推送算法分析35-37
• 4.3 缓存集群与板块数据的传输37-39
• 4.3.1 板块缓存数据传输算法37-39
• 4.3.2 板块数据传输算法分析39
• 4.4 数据传输总体策略39-40
• 4.5 本章小结40-42
• 5 遥感数据分布式共享传输系统设计42-50
• 5.1 系统的组成部分42-43
• 5.2 区域镜像分发子系统43-45
• 5.2.1 数据入库子系统43
• 5.2.2 镜像分发子系统43-44
• 5.2.3 板块分发子系统44-45
• 5.3 缓存数据共享子系统45-49
• 5.3.1 缓存数据的索引45-46
• 5.3.2 缓存数据的分块和传输46-49
• 5.4 本章小结49-50
• 6 总结与展望50-52
• 6.1 本文工作总结50
• 6.2 后续工作展望50-52
• 参考文献52-55
• 致谢55-56
• 攻读学位期间发表的学术论文与参加的项目56-57

【相似文献】

中国期刊全文数据库 前10条

1 刘晓龙;李英成;;遥感数据订购与管理软件的开发与应用[J];测绘科学;2006年04期

2 董秀珍;刘德长;叶发旺;宣艳秀;;遥感数据及航放、航磁数据处理浅析[J];世界核地质科学;2009年02期

3 李斌斌;冯钟葵;唐梦辉;;遥感数据异地归档方法研究与实现[J];遥感信息;2011年02期

4 严瑾;;遥感数据应急服务机制研究与实现[J];硅谷;2011年11期

5 姜宇鸣;陈道波;;遥感数据记录存档软件的设计与实现[J];郑州轻工业学院学报(自然科学版);2011年03期

6 张文;孟令奎;周扬;赵铭;涂振发;娄书荣;;多源水利遥感数据的一体化管理机制研究[J];水利信息化;2012年04期

7 谢怡;利用遥感数据研究地球变化[J];中国航天;1991年08期

8 李四海;提高遥感数据分类应用性的有效途径[J];国土资源遥感;1995年04期

9 李四海;浅谈提高遥感数据分类精度的方法[J];遥感信息;1995年04期

10 吴美蓉;中巴地球资源卫星应用及其发展[J];测绘科学;2000年02期

中国重要会议论文全文数据库 前10条

1 任娜;朱长青;;一种抗拼接的瓦片遥感数据水印算法[A];第四届“测绘科学前沿技术论坛”论文精选[C];2012年

2 黄二辉;潘德炉;杨燕明;;海洋遥感数据的时空分布经验正交分析方法研究[A];第十五届全国遥感技术学术交流会论文摘要集[C];2005年

3 徐国富;邓正栋;于德浩;;基于遥感数据的民用渡口选址模型及实例分析[A];国家安全地球物理丛书（八）——遥感地球物理与国家安全[C];2012年

4 谭福强;董双发;;遥感数据的尺度效应与遥感应用[A];第十四届全国遥感技术学术交流会论文摘要集[C];2003年

5 翟永;宋雪生;;遥感数据成果的分级存储管理[A];第十五届全国遥感技术学术交流会论文摘要集[C];2005年

6 李幸丽;杜培军;;面向数字城市的遥感数据挖掘及其应用[A];第十五届全国遥感技术学术交流会论文摘要集[C];2005年

7 张伟;;高空间分辨率遥感数据的预处理方法——以泉州快鸟数据为例[A];2007年福建省土地学会年会征文集[C];2007年

8 谢锋;潘明忠;亓洪兴;徐卫明;张雷;舒嵘;戴宁;薛永祺;;支持农业遥感数据产品开发与验证的相关技术进展[A];全国农业遥感技术研讨会论文集[C];2009年

9 钟志勇;陈映鹰;;海量遥感数据应用方法初探[A];第十四届全国遥感技术学术交流会论文摘要集[C];2003年

10 潘强;孙建中;倪丽萍;张杰;;上海城市遥感数据平台的构建及其在城市信息化进程中的作用[A];第十四届全国遥感技术学术交流会论文摘要集[C];2003年

中国重要报纸全文数据库 前10条

1 陈城;遥感数据把脉京城未来规划[N];建筑时报;2009年

2 本报记者 操秀英 陈磊;应急“蓄水池”：遥感数据在这里汇聚[N];科技日报;2013年

3 王彤琪;黄河凌情遥感数据更丰富 应用更便捷[N];黄河报;2009年

4 记者 李大庆;我国遥感数据信息利用率不足5%[N];科技日报;2011年

5 记者 李安利;测绘系统遥感数据服务体系日臻完善[N];中国测绘报;2003年

6 杨平;遥感数据有了处理新工具[N];科技日报;2003年

7 李红梅;南亚:使用遥感数据监测旱情[N];中国水利报;2012年

8 庞剑波 郑雄伟;三峡库区首获航空遥感数据[N];地质勘查导报;2009年

9 吕世充　蔚晓涵;武汉珈和遥感数据中心平台服务农业[N];中国测绘报;2014年

10 ;拓宽服务领域 提供高质量遥感数据[N];中国测绘报;2002年

中国博士学位论文全文数据库 前6条

1 程付超;面向海量遥感数据的分布式混合计算技术研究[D];成都理工大学;2014年

2 马超飞;基于关联规则的遥感数据挖掘与应用[D];中国科学院研究生院（遥感应用研究所）;2002年

3 周松涛;海量遥感数据的高性能处理及可视化应用研究[D];武汉大学;2013年

4 常歌;基于遥感数据的城市景观建模技术研究与实践[D];解放军信息工程大学;2001年

5 哈斯巴干;神经网络及其组合算法的遥感数据分类研究[D];中国科学院研究生院（遥感应用研究所）;2003年

6 穆超;基于多种遥感数据的电力线走廊特征物提取方法研究[D];武汉大学;2010年

中国硕士学位论文全文数据库 前10条

1 冶鑫晨;云环境下基于地理位置活跃度的遥感数据节能处理策略[D];新疆大学;2016年

2 钟金沙;Hadoop在PSInSAR遥感数据并行处理中的研究及应用[D];东南大学;2015年

3 赵静;基于DART模型的遥感数据空间尺度转换分析[D];辽宁工程技术大学;2015年

4 王锐;海洋遥感数据传输系统研究与设计[D];辽宁工程技术大学;2015年

5 郑永坤;基于Hadoop的遥感数据存储与管理系统的研究与实现[D];东南大学;2016年

6 张飞龙;基于MongoDB遥感数据存储管理策略的研究[D];河南大学;2016年

7 杜佳恒;遥感数据分布式共享架构的研究与应用[D];河南大学;2016年

8 张哲;基于海量遥感数据的集群并行处理技术研究与应用[D];河南大学;2012年

9 方聪;基于对等架构的海量遥感数据分发系统的设计与实现[D];浙江大学;2013年

10 史园莉;遥感数据集群处理系统架构设计与实现[D];中国测绘科学研究院;2010年

  本文关键词：遥感数据分布式共享架构的研究与应用，，由笔耕文化传播整理发布。

本文编号：478601