气象资料自动化存储系统的研究与实现
发布时间:2020-11-12 23:19
二十一世纪是中国气象事业腾飞的世纪。中国气象局要求各地气象部门要切实做好服务当地政府与社会生产工作。优质的气象服务需要全面、及时、精确的气象资料作为基础。陕西省目前气象资料的存储现状是“多种数据库系统并存,一种业务独占一个数据库”,缺少统一规划和顶层设计,进一步开发与维护比较困难。资料管理与数据共享存在诸多不便。 本文研究国内外资料存储技术的发展与应用现状。分析了气象行业资料的特点与业务要求,对各种气象资料进行了详细的归纳与整理。对目前陕西省气象部门各种气象资料进行规范化处理,设计并实现了统一集成的气象资料库、统一集中的数据存储结构与质量控制方法,提出了气象资料服务应用模型与接口规范。设计并建立了气象资料自动化存储系统,实现了气象资料自动存储。最后对系统进行了详细测试,确保了系统可用性与健壮性。 气象资料自动化存储系统建立了准确、全面的陕西省气象资料库,实现了气象资料统一的、系统的自动化存储及共享,大大增强了陕西省气象部门资料存储、共享的手段,有力地提升了气象资料应用的水平。 本文目前只是完成了气象资料的整理,资料库的创建与自动化系统的建立。以后还需在元数据的管理、气象资料的分析以及提高行业用户服务质量等方面做进一步研究。
【学位单位】:西安电子科技大学
【学位级别】:硕士
【学位年份】:2009
【中图分类】:TP333
【部分图文】:
集与分发、数据加工处理、数据存储管理、数据共享服务和业务监控五个业务应用系统以及计算机、存储、网络与安全等平台支持系统,此外,还包括标准规范等技术保障部分,各部分的逻辑关系如图2一1所示。狱狱拐共事加务移晓… …lll数拓姚一访内挂彭” .!!!犷 犷甲罕:宁门 门!!!入库管班!费侧故!麟归箱!狡旅徽合与处现 !!!lll” 111狱狱据收粼与分发簇统 ~~~已已置迪L石习公巡丝鲤红习巡堂迪汪 汪图2一1系统逻辑结构图根据上述逻辑结构,系统划分为:数据收集与分发系统、数据加工处理系统、数据存储管理系统、数据共享服务系统和业务监控系统五个业务系统,以及计算机存储和网络安全等基础平台。
式气象资料共享服务的应用,通过同城专网连接上述用户;工 nternetDMZ区运行面向科研教育以及社会公众,提供Web方式气象资料共享服务的应用,连接工nternet网络提供上述服务。系统网络体系结构如图图2一2所示。图2一2网络拓朴结构示意图2.7气象资料信息流程气象资料自动化存储系统涉及数据收集分发、数据加工处理、数据存储管理、数据共享服务和业务监控等一系列过程。数据处理信息包括观测资料和产品信息、元数据信息、业务监控信息。气象资料自动化存储系统的信息来源于观测系统上传的各类观测资料、国家级下发的资料和产品、各业务部门产生的业务产品、通过其它途径(如Internet)获得的资料和产品。通过收集系统获得观测资料和产品,在经过预处理后,分发或上传给用户单位,数据收发系统经过格式检查后的数据经数据加工处理系统对数据进行处理后,由存储管理系统将所有数据入库管理,数据共享服务系统负责存储管理系统管理的资料和产品的共享服务,通过分发、程序调用和Web检索下载等方式为内外部用户提供共享服务。所有信息处理的过程均产生监控信息,由业务监控系统对其进行统一管理、分析和展示。
载到数据库系统;向系统外的输出数据(服务数据)通过数据收发系统的分发功能和数据共享服务系统的数据共享服务功能实现,其间系统完成的一系列信息处理过程的信息流程(见图3一2)描述如下:数据收发系统收集到各类资料后,根据预处理流程的配置信息对资料进行文件编辑、文件名检查、文件格式检查、报告重复性检查等处理,然后将这些资料全部推送到数据加工处理系统的临时文件库,并将需要归档的资料推送到数据存储管理系统的归档目录中。同时对国家局和行业用户通过地面宽带网和同城专用网进行分发,在分发前还需对部分数据进行压缩和打包处理。数据收发系统将根据通信传输业务要求,对该系统的全部信息处理过程和数据收发情况进行记录,生成业务监控信息,传输至业务监控信息库。数据加工处理系统从临时文件库中获取数据,其中部分资料需进行解码;部分资料需在解码后进行实时质量控制;部分资料不需解码直接进行实时质量控制;部分资料不进行任何处理。这些资料将全部存入临时文件库
【参考文献】
本文编号:2881369
【学位单位】:西安电子科技大学
【学位级别】:硕士
【学位年份】:2009
【中图分类】:TP333
【部分图文】:
集与分发、数据加工处理、数据存储管理、数据共享服务和业务监控五个业务应用系统以及计算机、存储、网络与安全等平台支持系统,此外,还包括标准规范等技术保障部分,各部分的逻辑关系如图2一1所示。狱狱拐共事加务移晓… …lll数拓姚一访内挂彭” .!!!犷 犷甲罕:宁门 门!!!入库管班!费侧故!麟归箱!狡旅徽合与处现 !!!lll” 111狱狱据收粼与分发簇统 ~~~已已置迪L石习公巡丝鲤红习巡堂迪汪 汪图2一1系统逻辑结构图根据上述逻辑结构,系统划分为:数据收集与分发系统、数据加工处理系统、数据存储管理系统、数据共享服务系统和业务监控系统五个业务系统,以及计算机存储和网络安全等基础平台。
式气象资料共享服务的应用,通过同城专网连接上述用户;工 nternetDMZ区运行面向科研教育以及社会公众,提供Web方式气象资料共享服务的应用,连接工nternet网络提供上述服务。系统网络体系结构如图图2一2所示。图2一2网络拓朴结构示意图2.7气象资料信息流程气象资料自动化存储系统涉及数据收集分发、数据加工处理、数据存储管理、数据共享服务和业务监控等一系列过程。数据处理信息包括观测资料和产品信息、元数据信息、业务监控信息。气象资料自动化存储系统的信息来源于观测系统上传的各类观测资料、国家级下发的资料和产品、各业务部门产生的业务产品、通过其它途径(如Internet)获得的资料和产品。通过收集系统获得观测资料和产品,在经过预处理后,分发或上传给用户单位,数据收发系统经过格式检查后的数据经数据加工处理系统对数据进行处理后,由存储管理系统将所有数据入库管理,数据共享服务系统负责存储管理系统管理的资料和产品的共享服务,通过分发、程序调用和Web检索下载等方式为内外部用户提供共享服务。所有信息处理的过程均产生监控信息,由业务监控系统对其进行统一管理、分析和展示。
载到数据库系统;向系统外的输出数据(服务数据)通过数据收发系统的分发功能和数据共享服务系统的数据共享服务功能实现,其间系统完成的一系列信息处理过程的信息流程(见图3一2)描述如下:数据收发系统收集到各类资料后,根据预处理流程的配置信息对资料进行文件编辑、文件名检查、文件格式检查、报告重复性检查等处理,然后将这些资料全部推送到数据加工处理系统的临时文件库,并将需要归档的资料推送到数据存储管理系统的归档目录中。同时对国家局和行业用户通过地面宽带网和同城专用网进行分发,在分发前还需对部分数据进行压缩和打包处理。数据收发系统将根据通信传输业务要求,对该系统的全部信息处理过程和数据收发情况进行记录,生成业务监控信息,传输至业务监控信息库。数据加工处理系统从临时文件库中获取数据,其中部分资料需进行解码;部分资料需在解码后进行实时质量控制;部分资料不需解码直接进行实时质量控制;部分资料不进行任何处理。这些资料将全部存入临时文件库
【参考文献】
相关期刊论文 前9条
1 胡文超;李晓苹;韩海涛;;气象元数据应用研究进展[J];干旱气象;2008年04期
2 刘小宁,任芝花;地面气象资料质量控制方法研究概述[J];气象科技;2005年03期
3 高峰;赵芳;;元数据技术在MDSS实时气象数据库系统建设中的应用[J];气象科技;2006年S1期
4 王海军;杨志彪;杨代才;龚贤创;;自动气象站实时资料自动质量控制方法及其应用[J];气象;2007年10期
5 王英;苑跃;王小兰;;气象资料的质量控制[J];四川气象;2007年03期
6 张红娟;陈高峰;田红卫;;陕西省地面月气候资料省级质量控制方法[J];陕西气象;2009年03期
7 邓莉,王国复,孙超,王新华,赵慧敏;基本气象资料共享系统建设[J];应用气象学报;2004年S1期
8 王国复,徐枫,吴增祥;气象元数据标准与信息发布技术研究[J];应用气象学报;2005年01期
9 刘小宁;鞠晓慧;范邵华;;空间回归检验方法在气象资料质量检验中的应用[J];应用气象学报;2006年01期
本文编号:2881369
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/2881369.html