基于Paxos的强一致性复制在天文数据存储中的应用研究
发布时间:2021-02-19 16:23
随着新一代天文观测技术的快速发展,观测设备所获得的科学数据迅猛增长,传统的外挂式存储设备已经难以满足海量观测数据的近实时存储和同步数据处理的需求。基于廉价硬件的分布式存储系统是解决当前天文观测数据存储的有效手段。由于廉价硬件节点发生故障的概率相对较高,为了确保科学观测和数据的可靠存储,提出了一种基于Paxos的改进的分布式软件多副本复制算法。实验表明,在针对大于1 MB的天文FITS图像文件存储过程中,算法虽然增加少量的存储延迟,但能够容忍多种软硬件异常下多个副本的强一致性,较好地解决当前海量天文数据存储中的多副本数据存储的一致性问题。
【文章来源】:天文研究与技术. 2019,16(01)
【文章页数】:7 页
【文章目录】:
1 相关工作
2 改进的细粒度数据复制算法
3 算法性能分析
4 实验及讨论
5 结束语
【参考文献】:
期刊论文
[1]分布式实时存储环境下的FITS数据一致性研究[J]. 梁波,陈腾达,于孔林,刘应波,邓辉,柳翠寅,王锋. 天文研究与技术. 2016(04)
[2]FITS数据文件的检索和访问[J]. 崔辰州,李文,于策,徐祯,赵永恒,于建军. 天文研究与技术. 2008(02)
本文编号:3041373
【文章来源】:天文研究与技术. 2019,16(01)
【文章页数】:7 页
【文章目录】:
1 相关工作
2 改进的细粒度数据复制算法
3 算法性能分析
4 实验及讨论
5 结束语
【参考文献】:
期刊论文
[1]分布式实时存储环境下的FITS数据一致性研究[J]. 梁波,陈腾达,于孔林,刘应波,邓辉,柳翠寅,王锋. 天文研究与技术. 2016(04)
[2]FITS数据文件的检索和访问[J]. 崔辰州,李文,于策,徐祯,赵永恒,于建军. 天文研究与技术. 2008(02)
本文编号:3041373
本文链接:https://www.wllwen.com/kejilunwen/tianwen/3041373.html