一种面向CASA的分布式数据存储策略

发布时间：2017-06-28 14:24

  本文关键词：一种面向CASA的分布式数据存储策略，由笔耕文化传播整理发布。

【摘要】：随着天文设备的进步发展,对海量天文数据处理形成了新的挑战。为使当前主流的天文数据分析软件可以有效处理海量数据,提出一种适用于射电天文处理上层应用的分布式数据存储策略DDSS(Distributed Data Storage Strategy)。首先,设计分布式数据存储策略的系统框架。其次,设计混合分片列式存储方法,在保留列存储查询优势的同时提升了数据导入的速度。进一步,通过维护基于相对位置映射的元数据来快速读取包含大量数据的天文阵列数据,显著地提升了天文处理应用底层数据读写的吞吐量。最后,通过实验证明了该方法的有效性。
【作者单位】： 东华大学计算机科学与技术学院;
【关键词】： 分布式 天文 阵列数据
【分类号】：TP311.13
【正文快照】： 0引言 伴随着信息爆炸,大数据时代已经走入各行各业,在诸如天文学、物理学、社会科学等行业中正源源不断的产生真正的海量大数据。然而,这些行业在解决大数据所带来数据读写与处理缓慢问题的方法却滞后于其数据产生的速度。在射电天文领域,随着射电望远镜设备的飞跃发展,望远

【相似文献】

中国期刊全文数据库 前3条

1 ;CASA 2011征文通知[J];软件;2010年12期

2 汤洁,郑玲;计算机辅助精子分析(CASA)中的质量管理[J];中国优生与遗传杂志;2002年06期

3 ;[J];;年期

中国硕士学位论文全文数据库 前2条

1 冯智盈;基于CASA模型的NPP估算系统的开发与研究[D];吉林大学;2011年

2 耿君;基于CASA模型瓦屋山林场森林NPP估测与查询系统开发[D];南京林业大学;2012年

  本文关键词：一种面向CASA的分布式数据存储策略，由笔耕文化传播整理发布。

，

本文编号：494213