高性能气象数据存储集群及在线扩展技术应用

为了满足气象数据快速增长和高效应用的业务需求,设计采用基于SAN和GPFS的高性能存储集群进行数据存储,并随着数据量的快速增长,实现灵活在线扩展以满足数据存储需求。结合国家级气象资料存储检索系统、省级风能资源数据库共享服务系统和风能资源数值模拟系统的存储设计,阐述基于SAN和GPFS技术的存储集群架构,并重点介绍存储集群的在线扩展技术的实现。基于SAN和GPFS的存储集群在线扩展技术包含在线扩展服务器节点、在线扩展存储容量和在线扩展文件系统容量三方面,实现了气象数据存储系统随着业务数据变化的灵活扩展,使系统具备优秀的扩展性和适应性。

新一代天气雷达数据服务系统设计与实现

针对新一代天气雷达数据海量、高频率并发处理和规范化的存储服务问题,采用多机服务器集群和SAN统一管理架构、消息驱动的数据处理、海量数据存储管理、配置管理等关键技术,实现全国雷达数据收集、处理和存储服务业务流程。业务运行结果证明,该技术能满足业务要求,对我国天气雷达业务软件的研制具有较好的借鉴作用。

全球气象数据质量评估系统及应用(V1.0)

随着观测技术的发展,气象观测数据规模越来越大,数据种类越来越丰富,时间频次越来越精细.目前,国家气象信息中心通过国际通信系统、国内通信系统以及同城通信系统实时收集覆盖全球、区域及中国的地面、海洋、高空、飞机、卫星、雷达等观测数据,这些观测数据是全球、区域及中国天气预报、气候监测以及气候变化研究的重要数据支撑.在数据应用过程中,气象观测数据质量直接影响天气预报、气候监测及气候变化等应用分析的准确性和有效性.因此,如何在数据应用前进行有效的数据质量评估,正确认识数据质量状态并及时发现和解决数据质量问题,进而降低数据质量问题对数据应用端的影响,是保证气象数据发挥高效益的关键环节.