影像数据分布并行计算处理平台体系架构研究

发布时间：2018-05-29 09:19

  本文选题：大数据 + Hadoop架构　； 参考：《计算机工程》2017年05期

【摘要】：遥感影像数据并行处理系统大多依赖于国外商用产品,而国内自主化并行计算处理系统的任务流程化支撑能力以及并行计算性能难以适应规模化生产。为此,基于Hadoop的HDFS,MapReduce集群并行架构、CPU和GPU协同并行处理、内存映像、BMP等技术,提出流程驱动执行的高性能分布式并行计算处理平台体系架构。实验结果表明,工作站集群和工作站内多粒度混合的并行计算架构提高了平台并行处理性能,为海量遥感影像数据产品的批量生产提供一种自主化解决方案。
[Abstract]:Most remote sensing image data parallel processing systems rely on foreign commercial products, but the domestic autonomous parallel computing system can not adapt to large-scale production. Therefore, based on Hadoop's parallel architecture of HDFS / MapReduce cluster, such as collaborative parallel processing between CPU and GPU, memory image and BMP, a high performance distributed parallel computing platform architecture for process-driven execution is proposed. The experimental results show that the parallel computing architecture with multi-granularity mixing in workstation cluster and workstation improves the parallel processing performance of the platform and provides an autonomous solution for mass production of massive remote sensing image data products.
【作者单位】： 中国电子科技集团公司第三十二研究所;
【分类号】：TP338.6;TP751

【相似文献】

相关期刊论文 前10条

1 李强，，邹经湘;独立子结构并行计算方法[J];哈尔滨工业大学学报;1996年02期

2 赵晓路;使用流道反算延伸的多叶片排并行计算[J];工程热物理学报;2000年05期

3 舒继武,归丽忠,周维四,张德富;区域分解法解黑油数值模拟问题的并行计算[J];南京大学学报(自然科学版);1999年01期

4 沈建奇;金先龙;王吉云;;基于并行计算的盾构机过大堤三维数值模拟[J];上海交通大学学报;2008年08期

5 张剑清;柯涛;孙明伟;;基于集群计算机的海量航空数码影像并行处理——并行计算在航空数字摄影测量中的应用[J];计算机工程与应用;2008年13期

6 郭建平;肖华东;刘昭华;曹春香;张颢;光洁;;基于并行计算的气溶胶定量遥感反演模型实现[J];计算机应用;2009年06期

7 李杨;陈国平;邓军;;基于CUDA的并行计算在瞬态分析中的应用[J];江苏航空;2010年S2期

8 孙宏元;谢维信;杨勋;陆克中;;一种基于并行计算熵迁移策略的多分辨DOM数据生成算法[J];中国科学技术大学学报;2007年12期

9 胡小梅;胡贵华;朱文华;俞涛;;GaInP薄膜KMC生长并行计算模拟与可视化研究[J];太阳能学报;2010年03期

10 王继东;罗武胜;鲁琴;肖学敏;;双正交叠式变换的定点实现算法与DSP并行计算[J];光电工程;2008年04期

相关会议论文 前3条

1 张哲;唐春安;马天辉;张永彬;;基于并行计算的隧道围岩稳定性分析方法研究[A];庆祝中国力学学会成立50周年暨中国力学学会学术大会’2007论文摘要集（下）[C];2007年

2 范培勤;笪良龙;;水下三维声场传播模型的并行计算[A];2009年全国水声学学术交流暨水声学分会换届改选会议论文集[C];2009年

3 刘进忠;高大治;王宁;;一种水声传播的分布式网络并行计算方法[A];2008年全国声学学术会议论文集[C];2008年

相关硕士学位论文 前1条

1 张海蕾;八节点等参元及其并行计算在量子化学中的应用[D];大连理工大学;2004年

本文编号：1950342