MapReduce在气象数据传输时效统计中的应用

摘要：

气象数据的传输时效保障已成为探测和信息部门的重要工作之一,快速统计各类数据到报率和及时率成为一项迫切需求.基于 MapReduce 编程模型设计了各类数据到报率和及时率的算法,在Hadoop平台上利用该算法实现了各类数据的逐日到报率和及时率的统计,选择文本方式和Sequence File方式作为Ma-pReduce计算模型的输入数据源进行对比试验.试验结果表明,Sequence File 作为数据源能更好地提升MapReduce并行运算的性能.

关键词：MapReduce、数据传输、时效、到报率、及时率

所属期刊栏目：10

分类号：P315.69(大地（岩石界）物理学（固体地球物理学）)

资助基金：资助项目公益性行业气象科研专项GYH Y201206031

在线出版日期：2018-05-11（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：238-243