气象数据云数据存储技术及应用

发布时间：2018-03-28 05:03

  本文选题：云数据存储　切入点：气象数据　出处：《气象科技》2017年06期

【摘要】：针对气象数据种类多、信息量大、精度高等特点,传统的关系型数据库系统在存储处理、数据读取等方面存在负载饱和、读写性能不理想等问题,利用云数据存储技术,结合气象数据特征,设计了基于云数据存储平台的气象数据存储和处理方法。通过分析气象数据的结构化、半/非结构化特征,采用云关系型数据库存储结构气象数据;采用NoSQL对象库存储半/非结构化气象数据;在数据的存储过程中,应用了气象数据分块压缩技术,进行气象数据存储和传输。结果表明,所讨论的方法具有很好的存储传输效率,能够满足大规模气象数据在业务应用中对存储查询和处理速度的要求。
[Abstract]:In view of the characteristics of many kinds of meteorological data, large amount of information and high precision, the traditional relational database system has many problems, such as load saturation in storage and processing, data reading and writing, etc., so the cloud data storage technology is used. The method of meteorological data storage and processing based on cloud data storage platform is designed based on the characteristics of meteorological data. By analyzing the structured, semi-structured and unstructured features of meteorological data, the cloud relational database is used to store meteorological data with structured structure. NoSQL object library is used to store half / unstructured meteorological data. In the process of data storage, meteorological data block compression technique is used to store and transmit meteorological data. The proposed method has good storage and transmission efficiency and can meet the requirements of storage query and processing speed in large-scale meteorological data applications.
【作者单位】： 浙江省气象信息网络中心;
【基金】：广东省自然科学基金(2015A030310293) 浙江省气象局重点项目(2016ZD15,2015ZD06)资助
【分类号】：P409

【相似文献】

相关期刊论文 前10条

1 李雷孝;;气象数据深度挖掘优化方法研究与仿真[J];计算机仿真;2013年12期

2 李建;马琰钢;;浙江省“智慧高速”气象数据交互网络设计与实现[J];浙江气象;2013年03期

3 王元;王录中;;信息化气象数据存档后备和服务后援磁性载体配置的优化设计[J];气象科技;1991年06期

4 李树忠,王春芳,张振;自动气象数据采集站组态软件设计[J];青岛大学学报(工程技术版);1998年02期

5 F.Cerquetti;章育仲;;气象数据的采集、检验及管理[J];气象科技;1989年06期

6 黄业斐;严玲;;气象数据应急传输解决方法初探[J];气象研究与应用;2009年S1期

7 王甫棣;郑波;胡英楣;;国务院气象数据服务系统的升级改造[J];气象科技;2012年05期

8 普布卓玛;达娃多吉;;浅谈西藏农经网气象数据维护的经验及建议[J];电子制作;2013年19期

9 武茹芳，刘效文，郭五娃;微机在气象数据处理中的应用[J];山西气象;1995年03期

10 华韵子;邵玲玲;林红;;长江三角洲气象数据实时共享技术研究与实现[J];气象科技;2014年02期

相关会议论文 前10条

1 黄涛;郑晓栋;;气象数据中心设计与应用[A];第31届中国气象学会年会S13 气象通信与信息技术应用实践与新技术探索[C];2014年

2 黄业斐;严玲;;气象数据应急传输解决方法初探[A];2008年广西气象学会学术年会论文集[C];2008年

3 杨柳;林才;林海燕;刘加平;;我国典型气象年的生成方法及其原始气象数据质量处理分析[A];全国建筑节能技术与设计学术会议论文集[C];2005年

4 王新堂;张国平;李芸;曲军;;山东省气象数据资源收集工作探讨[A];山东气象学会2005年学术交流会优秀论文集[C];2005年

5 高亢;秦岩松;纪俊云;;CMACast气象数据文件收发效果分析[A];2011年中国气象学会气象通信与信息技术委员会暨国家气象信息中心科技年会论文摘要[C];2011年

6 王甫棣;姚燕;李湘;;基于XML的气象数据订阅系统设计[A];2011年中国气象学会气象通信与信息技术委员会暨国家气象信息中心科技年会论文摘要[C];2011年

7 韩海涛;李仲龙;;地面实时气象数据质量控制方法研究进展[A];第31届中国气象学会年会S13 气象通信与信息技术应用实践与新技术探索[C];2014年

8 林奕峰;滕少华;陈潇;林蟒;成明;;基于KNN的多组合器协同挖掘区域自动站气象数据[A];第31届中国气象学会年会S13 气象通信与信息技术应用实践与新技术探索[C];2014年

9 沈昭华;谭洪卫;吕思强;永村一雄;;上海地区建筑能耗计算用典型年气象数据的研究[A];上海市制冷学会2009年学术年会论文集[C];2009年

10 于万荣;;应用Web Service方式进行气象服务模式探讨[A];创新驱动发展 提高气象灾害防御能力——S3第三届气象服务发展论坛——公众、专业气象预报服务技术与应用[C];2013年

相关重要报纸文章 前7条

1 王长城;新一代气象数据卫星广播系统落户我州[N];甘孜日报(汉文);2011年

2 通讯员 王国复　高峰;气象空间信息库助力国家电子政务[N];中国气象报;2012年

3 记者 谢庆裕;加强气象数据信息转化应用[N];南方日报;2013年

4 记者 尕玛多吉 叶辉;我区年内将实现高原气象数据采集自动化[N];西藏日报;2004年

5 马旭清 任桂林;搭建共享平台 我省气象信息实现整合[N];黑龙江经济报;2007年

6 Kim S.Nash;天气中的大数据[N];计算机世界;2013年

7 记者 谢忠军;收集南海气象数据[N];中国气象报;2012年

相关硕士学位论文 前9条

1 王剑辉;基于分支定界的不平衡气象数据晴雨分析与预测[D];广东工业大学;2016年

2 朱兴宇;多组件融合的WRF模式气象数据可视化平台研究[D];南京信息工程大学;2016年

3 李婷;基于气象数据的高高原签派放行研究[D];中国民用航空飞行学院;2017年

4 陈文慧;大规模气象数据布局的自适应性研究[D];东北大学;2012年

5 赵方霞;基于气象数据的数据挖掘算法研究[D];北方工业大学;2011年

6 李全月;气象数据网络化集成管理系统的设计[D];南京信息工程大学;2014年

7 白珍;气象数据图形显示系统的设计与实现[D];电子科技大学;2015年

8 王倩倩;基于RS和GIS的农区气象数据重建方法研究[D];南京大学;2013年

9 薛莉;基于Google Earth的气象数据可视化系统的设计[D];南京信息工程大学;2013年

，

本文编号：1674854