云数据存储技术在气象数据存储中的应用

作     者：陈晴 杨明 肖云 吴京生 滕舟 魏爽 胡永亮 庞俊 Chen Qing1,Yang Ming1,Xiao Yun1,Wu Jingsheng1,Teng Zhou1,Wei Shuang1,Hu Yongliang1,Pang Jun2

作者机构：浙江省气象信息网络中心浙江杭州310017 武汉科技大学计算机科学与技术学院湖北武汉430065 

基　　金：国家自然科学基金项目(61702381) 浙江省气象局重点项目(2016ZD15-1) 

出 版 物：《计算机应用与软件》 (Computer Applications and Software)

年 卷 期：2018年第35卷第8期

页      码：124-127,158页

摘      要：气象数据具有体量巨大、种类繁多、数据响应速度要求快等特点,传统的数据存储模式难以适应气象大数据的需求。基于云分布式存储技术设计一套数据存储方法,提高了气象数据存储传输能力。将气象数据分成结构化、半结构化和非结构化三种结构类型,针对不同结构类型的数据分别选择云存储模型,结构化数据采用分布式关系型数据库存储,半/非结构化数据采用No SQL数据库存储。在对半/非结构化数据存储设计中,对数据进行主键表及属性表设计,对属性表的数据进行分块和压缩,提高大数据的存储读取性能。根据数据的时间度和使用度原则阐述了不同类型气象数据间的转换。实验表明,设计的基于云分布式存储技术的数据存储方法是可行的,在一定程度上提高了气象数据存储传输能力,为气象数据的云化建设提供一定的借鉴和参考。

主 题 词：云存储 分布式关系型数据库 NoSQL数据库存储 数据分块和压缩 数据的时间度和使用度 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

D　O　I：10.3969/j.issn.1000-386x.2018.08.022

馆 藏 号：203335370...