基于多层架构的海量天文数据管理系统设计与实现

发布时间：2024-11-02 04:00

　　天文观测技术的深入发展使得天文学家可以获取海量的观测数据,位于国家天文台兴隆观测站的GWAC(地基广角望远镜观测阵列)由多台望远镜组成,在观测时段每台望远镜并行地对天空进行大范围观测,有效满足了天文学家的观测需求。天文学家对于GWAC观测数据的需求可总结为四点:第一,天文观测数据的实时采集,天文学家要求在观测时段获取观测数据;第二,天文观测数据的实时处理,天文学家要求对采集到的观测数据进行实时的数据处理,以帮助天文学家及时发现天文现象;第三,天文观测数据存储,天文数据作为一种宝贵的科研数据,需要将其长期可靠地存储起来,以供日后科研工作使用;第四,天文观测数据检索,天文学家要求系统对海量观测数据提供数据检索服务。对于天文观测数据的采集与处理,目前天文学界缺少对于多镜头并行数据采集、处理的方案。对于天文观测数据的存储与检索,一方面天文学家要求天文观测数据能够快速入库,另一方面天文学家要求对天文观测数据进行大规模的数据检索。近年来天文数据管理受到学术界的广泛关注,在十三五国家重点研发计划科学大数据的子课题---超大规模关系型数据管理关键技术及系统中,学者们提出了天文大数据管理的相关问题,在这样...

【文章页数】：95 页

【学位级别】：硕士

【部分图文】：

在观测时段直接对观测数据进行处理、存储等流程，会造成系统拥塞，为了满足天??文学家的各种需求，本系统在逻辑上采用两层数据管理架构，分别为实时数据管理??层和离线数据管理层。经过与天文学家多次讨论，明确了用户功能性需求，如图２－??１所示：??糸统功能霈求??？?天文数据采集??Ｇ....

在观测时段直接对观测数据进行处理、存储等流程，会造成系统拥塞，为了满足天??文学家的各种需求，本系统在逻辑上采用两层数据管理架构，分别为实时数据管理??层和离线数据管理层。经过与天文学家多次讨论，明确了用户功能性需求，如图２－??１所示：??糸统功能霈求??？?天文数据采集??Ｇ....

２．３．１天文数据采集??天文数据采集模块主要为系统提供数据支撑，包括望远镜监控功能、Ｆｉｔｓ文件??解析功能。数据采集部分用例图如图２－３所示。??（１）

２．３．１天文数据采集??天文数据采集模块主要为系统提供数据支撑，包括望远镜监控功能、Ｆｉｔｓ文件??解析功能。数据采集部分用例图如图２－３所示。??（１）

本文编号：4008994