基于数据感知的气象算法调度框架设计与应用

作     者：霍庆 何文春 高峰 陈士旺 徐拥军 王琦 Huo Qing;He Wenchun;Gao Feng;Chen Shiwang;Xu Yongjun;Wang Qi

作者机构：国家气象信息中心北京100081 

基　　金：中国气象局重点创新团队(CMA2024ZD05) 中国国家铁路集团有限公司科研计划课题(N2022T011) 国家气象信息中心创新团队(NMIC-2024-ZD11) 

出 版 物：《应用气象学报》 (Journal of Applied Meteorological Science)

年 卷 期：2024年第35卷第4期

页      码：502-512页

摘      要：气象产品加工任务往往由不同算法组合而成,其状态对数据源具有高依赖性。高效感知数据状态,并及时合理启动调度,对提升气象产品加工的时效性至关重要。设计并建设了基于数据感知技术的气象算法调度框架,对比测试结果分析表明:在实时分析数据源到报状态的基础上,数据感知调度实现数据到报即算法启动运行,任务调度延迟较定时调度显著降低,由3784 ms降至11 ms。数据感知调度作为气象大数据云平台加工流水线的核心能力,已在国省部署并实时运行。目前在国家级业务中支撑19种核心业务算法的高效调度,日调度次数约为6.67×10^(5),平均调度延迟为31 ms;在省级业务中支撑14种算法的高效调度,日调度次数约为8×10^(4),平均调度延迟为156 ms。此外,数据感知调度实现了气象业务上下游算法的无缝串联,可为解决气象业务间的脱节问题、提升气象业务间的协同性提供解决方案。

主 题 词：数据感知技术 任务调度 气象算法 气象大数据云平台 加工流水线 

学科分类：07[理学] 070601[070601] 08[工学] 080402[080402] 0804[工学-材料学] 0706[理学-大气科学类] 

核心收录：

D　O　I：10.11898/1001-7313.20240410

馆 藏 号：203128772...