摘要：随着气象大数据云平台“天擎”正式业务化运行,提升大数据算法的运行效率和加强算力资源的优化配置已成为亟需解决的问题。从系统的建设需求、总体架构以及实现方式等问题出发,探讨了气象大数据算力资源优化管理系统的设计思路和若干关键技术,得出以下结论:系统基于B/S架构,以“天擎”为数据中台,以容器作为算力资源供给和优化管理对象,包括加工容器调度和容器平台管理两个子系统;加工容器调度子系统包括账户创建、资源授权、镜像制作、算法注册、算法加载、任务定义、任务启动、任务日志收集等功能,用户可以在调度平台上灵活地实现任务的触发;任务被触发后,加工容器调度子系统在容器平台中创建容器、执行任务并实时监控任务执行期间容器的使用情况;容器平台管理子系统基于Kubernetes的容器编排引擎,将算法配置的资源与可分配资源进行对比,完成配置文件拼装、资源部署脚本下发、节点预选优选,最终获取算法的运行结果;综合运用多节点均衡调度、算法资源精细化匹配、容器运行资源隔离、镜像存储故障恢复、容器和算法故障监控等关键技术,有效提升了容器算力资源调度能力、可靠性和资源利用率。

摘要：为满足华中区域对高分辨率数值预报的业务需求,华中区域中尺度数值天气预报系统于2014年4月1日业务运行。该系统以命令行方式提交和运行,存在监控管理不直观、故障难定位和处理复杂、运行效率低等问题。针对存在的问题,运用SMS(Supervisor Monitor Scheduler,监控管理调度系统)技术进行了流程化调度开发,构建了客户端/服务器结构的华中区域中尺度数值天气预报系统。新系统充分考虑各流程间的关联,将整个业务系统的运行过程串联为一个整体。相比原系统,其具有以下特点:可提供友好的图形化维护界面,整个运行流程结构清晰,能方便、快捷地定位和解决故障,大幅度提升业务系统的运行效率,较原系统整体运行时间缩短约35.4%,节约时间主要集中在数据获取、后处理与产品制作上。

摘要：为了进一步满足华中区域对高时空分辨率数值预报产品的业务需求,为短临预报和精细化格点预报提供技术支撑,华中区域快速更新同化预报模式系统于2015年7月完成系统搭建并开始业务试运行,2017年12月又根据业务需要完成了系统结构的调整。由于该系统具有流程复杂,步骤繁多的特点,为了使调度监控更加直观,故障定位更加准确,系统维护更加高效,运用ECFLOW技术对整个预报系统进行了流程化调度开发,设计并实现了华中区域快速更新同化预报业务流程监控系统。该系统图形界面美观友好,流程结构清晰明了,故障定位准确且处理操作简单,可大幅提升业务模式运行监控及维护的工作效率。