刘振
- 作品数:13 被引量:23H指数:2
- 供职机构:国家气象信息中心更多>>
- 发文基金:公益性行业(气象)科研专项国家自然科学基金青年科技基金更多>>
- 相关领域:天文地球自动化与计算机技术电子电信更多>>
- 基于雷达流的虚拟体扫数据生成方法和装置
- 本发明公开了一种基于雷达流的虚拟体扫数据生成方法和装置,属于气象信息处理领域。本发明提出了虚拟体扫数据的技术,将仰角数据与体扫基数据有机结合,将最新的仰角数据融入体扫基数据,从而获得与仰角数据实时同步的虚拟体扫数据供应用...
- 刘振肖卫青韩鑫强韩丰郭萍薛蕾张来恩戴晴韩书丽李媛翯王颖王博霍庆何文春高峰陈士旺
- 海量气象站点数据分布式存储测试及其应用被引量:7
- 2016年
- 站点数据是气象观测数据的主要组成部分,每日检索量大,且时效要求高。为了更好地管理与服务气象资料,国家气象信息中心从2013年开始致力于新存储技术在气象领域的探索。为了更好地兼容目前的存储与服务方式,选择了分布式关系型数据库作为技术方案,并开展了一系列仿真气象业务场景的测试。测试结果表明,分布式数据库无论在数据插入还是在检索方面都具有较好的性能,同时具有较好的可靠性、灵活性和扩展性。根据测试结论,搭建了分布式存储试验系统,导入了CIMISS地面、高空等建站以来的历史数据,并接入了站点数据的实时流程。实现了海量站点资料的完全在线,同时也满足了气象业务对资料高时效性的需求。
- 徐拥军何文春刘振王琦倪学磊
- 关键词:分布式存储自动站
- 海量气象结构化数据分布式存储测试
- 随着气象事业的快速发展,气象结构化数据的种类越来越丰富,存储总量急剧增加,传统集中式数据管理方式越来越不满足数据存储与服务需求,需要采用新技术新方法解决目前面临的问题,快速发展与日益成熟的大数据技术为我们提供了解决思路....
- 徐拥军王妍孙超刘振
- 关键词:分布式存储海量数据
- 文献传递
- 基于模板识别的BUFR数据处理方法、装置及设备
- 本发明公开了一种基于模板识别的BUFR数据处理方法、装置及设备,涉及气象信息处理领域,该方法包括解析目标BUFR数据,提取数据标识段中的主表版本号和数据描述段中的描述符序列;根据码表以及提取的主表版本号和描述符序列,对目...
- 韩书丽肖卫青薛蕾王颖刘振高峰何文春郭萍王佳强
- 基于Storm的海量气象观测数据处理方法和装置
- 本发明公开了一种基于Storm的海量气象观测数据处理方法和装置,属于气象信息处理领域。本发明设计了新的STORM处理框架,可以直接对接RabbitMQ的BUFR格式消息,减少了从传输到入库的中间环节,实现了数据即来即处理...
- 肖卫青薛蕾刘振王颖郭萍张来恩韩书丽王佳强李媛翯霍庆高峰陈士旺何文春
- 地面气象资料统计处理系统设计与实现被引量:14
- 2018年
- 为实现6万余个地面气象站资料实时统计处理,设计并实现了地面气象资料统计处理系统。系统采用灵活易扩展的技术框架,应用大数据分布式流处理技术实现高效的数据处理,较传统统计处理框架统计时效提升10掊以上,主要功能包括基于任务调度的定时统计、针对迟到数据和数据更正信息的统计结果滚动更新、自定义统计、统计处理通用算法服务等,采用国家级一级部署、各省同步应用的业务布局保证数据的一致性。2017年1月投入业务运行后,实时计算800余个多种尺度的统计项并通过全国综合气象信息共享平台(CIMISS)数据统一服务接口提供统计产品服务。分析表明:地面气象资料统计产品2017年月平均下载次数达到1951.4万次,在CIMISS所有400余种观测资料或产品中排名第三,为天气监测预报预警、气象决策服务、气候监测业务、公共气象服务等提供重要的基础数据支撑。
- 孙超霍庆任芝花刘振肖卫青徐拥军
- 关键词:地面气象资料分布式计算模块化
- 通用可配置的非结构化气象数据处理方法和装置
- 本发明公开了一种通用可配置的非结构化气象数据处理方法和装置,属于气象信息处理领域。本发明针对气象数据中非结构化数据存储过程需要的索引提取过程,设计了通用的计算引擎,通过支持函数计算等,实现了可配置化的通用处理,可以快速实...
- 肖卫青王佳强薛蕾郭萍刘振王颖韩书丽李媛翯霍庆高峰陈士旺何文春刘媛媛郑波
- GTS多格式探空报文实时转换方法和装置
- 本发明公开了一种GTS多格式探空报文实时转换方法和装置,属于气象信息处理领域。本发明对GTS多格式探空报文进行解码入库,根据设置的数据整合规则,进行数据整合,发现并整合相应的重复数据,发现并保留各自独有的数据。本发明设置...
- 肖卫青郭萍刘振韩书丽王颖薛蕾霍庆张来恩王佳强
- 全国典型台站降雨期雨滴谱特征分析被引量:2
- 2021年
- 基于2018—2019年激光雨滴谱仪分钟观测资料,依据年降雨量分区域挑选7个典型站点进行雨滴谱特征分析。结果表明,基于分钟雨滴谱数据计算的小时雨强与台站观测雨强的相关系数均超过0.92,二者平均差值为负值,且差值随雨强增大而增大。雨滴直径等级频数百分率分布为双峰结构,质量百分率分布为多峰结构。直径小于1 mm的小雨滴对雨滴数浓度的贡献率达77.8%,对雨强的贡献率只有18.1%;直径大于2 mm的大雨滴占总数浓度的2.6%,对雨强的贡献为41.8%。考虑雨滴下落末速度影响后,小雨滴对雨滴总数浓度的贡献率增大9.7个百分点,中雨滴和大雨滴对雨滴总数浓度的贡献率降低。随雨强减弱,大雨滴数浓度减小,超大雨滴消失,谱宽收窄,小雨滴数浓度变化特征随台站出现差异。
- 刘振吴雪媛余予任芝花
- 关键词:雨滴谱
- 地面自动气象站数据流式处理设计与实现
- 2024年
- 针对观测密度和频次日益增加的海量地面自动气象站数据,在气象大数据云平台(天擎)中设计了基于Storm的实时流式处理,利用大规模并行处理的优势提高地面自动气象站数据的处理时效。在流式处理中,设计处理拓扑直接解码标准格式的数据消息;消息确认采用手工确认的方式,将数据解码组件锚定数据接入组件,实现每条数据的可靠处理;数据解码时进行字节校验和时间检查等,过滤异常数据;应用批量加定时的发送策略,解决海量监控信息发送气象综合业务实时监控系统(天镜)的问题;集群部署时保留部分剩余资源,有效应对单节点异常。应用效果表明:国家气象站小时数据的服务时效由全国综合气象信息共享系统(CIMISS)的175 s提高至天擎的78 s,约6×10^(4)个区域气象站小时数据的服务时效由CIMISS的5 min提高至天警的2 min,实况分析系统将数据源切换至天擎后,相同时间检索可获取的站点数量较CIMISS增加1倍。2021年12月基于Storm的流式处理与天擎一同在国省业务化运行,实现了长期稳定运行,为MICAPS4、SWAN2.0、实况分析系统等用户提供高效稳定的地面自动气象站数据。
- 肖卫青薛蕾刘振罗兵王颖张来恩郭萍霍庆韩书丽何文春
- 关键词:地面自动气象站STORM