看过本文的还看了

相关文献

该作者的其他文献

文献详情 >MapReduce在气象数据传输时效统计中的应用 收藏
MapReduce在气象数据传输时效统计中的应用

MapReduce在气象数据传输时效统计中的应用

作     者:赵文芳 刘旭林 桑雪竹 王鳞春 ZHAO Wenfang;LIU Xulin;SANG Xuezhu;WANG Linchun

作者机构:北京市气象信息中心北京100089 北京市气象探测中心北京100089 内蒙古气象信息中心呼和浩特010051 

基  金:公益性行业(气象)科研专项(GYHY201206031) 

出 版 物:《南京信息工程大学学报(自然科学版)》 (Journal of Nanjing University of Information Science & Technology(Natural Science Edition))

年 卷 期:2018年第10卷第2期

页      码:238-243页

摘      要:气象数据的传输时效保障已成为探测和信息部门的重要工作之一,快速统计各类数据到报率和及时率成为一项迫切需求.基于Map Reduce编程模型设计了各类数据到报率和及时率的算法,在Hadoop平台上利用该算法实现了各类数据的逐日到报率和及时率的统计,选择文本方式和Sequence File方式作为Map Reduce计算模型的输入数据源进行对比试验.试验结果表明,Sequence File作为数据源能更好地提升Map Reduce并行运算的性能.

主 题 词:MapReduce 数据传输 时效 到报率 及时率 

学科分类:070801[070801] 07[理学] 0708[理学-地球物理学类] 

D O I:10.13878/j.cnki.jnuist.2018.02.017

馆 藏 号:203285533...

读者评论 与其他读者分享你的观点

用户名:未登录
我的评分