线上期刊服务咨询,发表咨询:400-808-1701 订阅咨询:400-808-1721

地面气象资料统计处理系统设计与实现

孙超; 霍庆; 任芝花; 刘振; 肖卫青; 徐拥军 应用气象学报 2018年第05期

摘要:为实现6万余个地面气象站资料实时统计处理,设计并实现了地面气象资料统计处理系统。系统采用灵活易扩展的技术框架,应用大数据分布式流处理技术实现高效的数据处理,较传统统计处理框架统计时效提升10掊以上,主要功能包括基于任务调度的定时统计、针对迟到数据和数据更正信息的统计结果滚动更新、自定义统计、统计处理通用算法服务等,采用部级一级部署、各省同步应用的业务布局保证数据的一致性。2017年1月投入业务运行后,实时计算800余个多种尺度的统计项并通过全国综合气象信息共享平台(CIMISS)数据统一服务接口提供统计产品服务。分析表明:地面气象资料统计产品2017年月平均下载次数达到1951.4万次,在CIMISS所有400余种观测资料或产品中排名第三,为天气监测预报预警、气象决策服务、气候监测业务、公共气象服务等提供重要的基础数据支撑。

关键词:地面气象资料统计处理分布式计算模块化滚动更新

单位:国家气象信息中心; 北京100081

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

应用气象学报

北大期刊

¥400.00

关注 25人评论|0人关注