海量遥感影像数据高效管理方法研究

发布时间：2021-04-02 23:20

　　遥感影像数据爆炸式的增长趋势给数据的存储和检索带来巨大挑战,本文针对海量遥感影像数据的管理需求,在研究分析相关架构和技术的基础上,提出了新的解决方案,最终设计并创建了一个遥感影像数据管理系统。本文的主要研究及结论如下:（1）对比分析当前主流的分布式文件系统,选取HDFS作为遥感影像的存储系统。针对其在存储海量遥感影像时存在的不足,采用冗余备份、协同工作的方式解决NameNode的单点故障,保证系统的容错性;引入监控系统,监控节点的性能并进行异常报警,提高系统的稳定性;提出一种小文件存储优化方案,通过将小文件直接存储在分布式数据库中,进而提高了小文件的存取效率。（2）对比分析当前主流的NoSQL数据库,选取分布式搜索引擎对遥感影像元数据进行组织存储。提出了一种以Elasticsearch为基础,批量自动提取多源异构的遥感影像元数据,并对大规模元数据进行索引构建,从而实现高效检索数据的方法。实验结果表明:在检索速度方面,该方法的检索速度明显优于传统的关系型数据库。（3）在本文提出的影像存储与组织管理方法的基础上,分析系统需求,确定系统架构,设计并开发了中国工程科技知识中心“地理资源与生态专... 

【文章来源】：湖南师范大学湖南省 211工程院校

【文章页数】：70 页

【学位级别】：硕士

【部分图文】：

技术路线图

HDFS体系结构

图 2-3 切换时间对比由图可知，Secondary NameNode 方案随着遥感影像数量的增加，切换时间基本呈线性增长趋势。Backup NameNode 方案由于无需重新加载命名空间，切换时间约为 Secondary NameNode 的三分之二。Avatar 的切换时间与遥感影像数量

【参考文献】：
期刊论文
[1]国家地理信息公共服务平台“天地图”的关键技术与工程实践[J]. 蒋捷,吴华意,黄蔚.  测绘学报. 2017(10)
[2]陆地观测卫星数据中心:大数据挑战及一种解决方案[J]. 徐文,邵俊,喻文勇,冯鹏.  武汉大学学报(信息科学版). 2017(01)
[3]分布式文件系统综述[J]. 文莎.  软件导刊. 2015(11)
[4]遥感的科学推动作用与重点应用领域[J]. 吴炳方,邢强.  地球科学进展. 2015(07)
[5]国家陆地观测卫星数据服务与应用[J]. 傅俏燕,李俊杰.  卫星应用. 2015(03)
[6]HY-2卫星地面应用系统运行控制方案设计与实现[J]. 兰友国,林明森,谢春华.  中国工程科学. 2014(06)
[7]HY-2卫星地面应用系统综述[J]. 蒋兴伟,林明森,张有广.  中国工程科学. 2014(06)
[8]国家地理信息公共服务平台天地图[J]. 黄蔚.  卫星应用. 2014(01)
[9]面向分布式服务聚合的“天地图”总体技术架构[J]. 李志刚,蒋捷,翟永,王茜,黄蔚.  测绘地理信息. 2012(05)
[10]天地图网站云架构系统设计[J]. 翟永,刘津,陈杰,刘磊.  信息安全与通信保密. 2012(09)

硕士论文
[1]一种基于HBase的海量空间遥感数据检索系统[D]. 林久对.浙江大学 2015



本文编号：3116146