气象应用业务融入气象大数据云平台的设计

针对现有气象应用不能直接融入气象大数据平台的现状,该文采用“云+端”融入的方法,对气象应用的数据存储、产品加工、业务监控、应用接口以及应用端进行改造设计,使现有气象应用业务能够快速接入气象大数据云平台。该设计在湖北气象业务进行应用,避免了因气象业务智能化建设而造成的重复建设和资源浪费,有利于推动气象业务智能化发展,为今后气象应用改造提供了参考。

气象大数据云平台仿真环境容器调度性能优化研究

为实现2025年气象关键核心技术自主可控的目标,气象大数据云平台(简称天擎)建立了基于海光X86服务器和麒麟操作系统的仿真环境。在仿真平台运行中发现,基于容器技术的产品加工与流水线子系统容器调度性能较差,不能满足用户融入算法的时效要求。针对此问题,本文采用对比分析法,选取天擎仿真环境和业务环境的3种CPU芯片服务器和3种操作系统为研究对象,设计了一系列组合对比测试用例,找到了影响容器调度性能的关键因素—操作系统内核,并进一步分析了操作系统内核设置对系统实时性和吞吐量的影响以及适用的业务场景。最后给出了麒麟操作系统内核调整方法,通过调整内核设置,容器调度性能大幅提高,满足了产品加工系统的时效要求,为实现天擎的关键核心技术自主可控奠定基础。

基于气象大数据云平台的政务区数据同步技术研究

随着气象大数据的快速发展和山东数字强省建设的深入推进,气象数据在地方政府的发展和决策制定中发挥着越来越重要的作用。为了满足政府数据应用的需求,提出一种基于气象大数据云平台的高效、安全、可靠的数据同步方案,以实现政务区的数据同步,提升气象数据服务能力和信息化水平。依据气象数据的类型和特点,将其划分为一般结构化数据、特色结构化数据和非结构化数据三类,针对每类数据提出了相应的同步技术方案,构建了针对政务区数据同步的综合解决方案,并以山东省气象数据为例进行了实验分析。结果表明,所提方案具备高度可行性、有效性和安全性,可为政府决策提供强有力的数据支撑。

基于大数据云平台的天山气象APP设计与应用

为提升大数据云平台与移动互联网的耦合气象服务质量,满足气象防灾减灾移动可视化需求,推进新疆气象信息化事业高质量发展,亟需开发一款专业气象服务APP。该APP在“云+端”业务模式下充分利用气象业务现有数字化成果,采取多源存储、接口调用、控制反转和数据交互技术,对全疆天气自动站的地面观测、格点实况融合、雷达回波、灾害预警等气象资料进行加工处理和移动展示。天山气象APP可按用户需求提供疆内基于实时位置的天气实况、精细化预报、预警详情、雷达拼图、实况要素产品和统计值要素产品,同时继承大数据云平台服务接口高额承载能力,实现毫秒级响应,在全疆天气自动站应急保障与气象防灾减灾服务中应用成效显著。

基于气象大数据云平台的监控告警应用研究

由于已有气象数据监控系统的业务流程不适用最新的业务发展,结合我省实际气象信息化业务需求,研究和分析气象数据传输的业务流程,采用Model+View+Controller(MVC)开发模式,使用作业调度Quartz、多线程Smart Thread Pool等技术框架,基于气象大数据云平台升级现有气象数据监控告警系统,实现我省常规气象数据的实时监控告警。目前,该系统已投入业务运行,各功能模块运行稳定,可高效地帮助一线值班人员发现数据异常问题,提高了我省气象数据的监控告警能力。

“大数据+云平台”环境下的企业全面预算管理信息系统构建

本文设计了基于“大数据+云平台”环境下的企业全面预算管理信息系统。该系统旨在高效融合大数据和云平台,提供全面的预算管理功能,采用Amazon Web Services (AWS)为云平台提供商,并使用大数据技术,包括Apache Hadoop、Apache Spark和Apache Kafka等,分别用于大数据分布式存储/处理、实时数据处理/分析以及数据流处理/事件驱动的数据采集。系统架构包括用户界面层、应用层、服务层、数据存储层以及云平台。功能模块设计包括数据采集、数据处理、预算规划与分析等。系统还着重强调保护用户数据的隐私。最后,本文进行了运行性能测试。测试结果表明,在不同场景下,系统响应时间和吞吐量均在可接受范围内,系统运行性能能满足实际需求。

基于气象大数据云平台的数据访问实现方法

随着气象观测系统的不断发展,气象数据类型、数量日益增长。气象大数据云平台支持大数据汇聚交换、产品加工、共享服务和挖掘分析,实现了气象数据的高效服务。通过介绍基于气象大数据云平台的Rest数据访问方式、脚本数据访问方式和文件目录数据访问方式的参数配置和具体应用,可以使气象工作人员对气象大数据云平台有更深入的了解,并自主高效获取数据,最大程度地发挥气象数据效能。

福建气象大数据云平台服务接口监控系统设计与实现

利用Intellij IDEA软件开发福建气象大数据云平台服务接口监控系统,通过JAVA程序调用福建“天擎”服务接口,算法融入“天擎”加工流水线,获取返回的状态码以及接口数据,通过科学的预警设置来判断接口的可用性、接口数据的及时性和完整性,实现实时监控,缩短服务接口故障时间,实时地保证服务接口功能可用,为省市级各气象单位业务系统提供更好的数据服务。

基于OpenStack的高校大数据实践云平台构建和实践探究

目前,高校在传统的大数据实践平台建设中出现了基础设施利用率低、运维成本高等问题。对于传统的大数据实践平台无法满足学生实验的要求,文中构建了基于OpenStack的大数据实践云平台。平台能够实现资源的弹性分配、共享、有效管理和有效利用。平台中提供了多种实例类型和镜像,学生用各自分配的账号和密码登录实践平台按需创建实例做实训,满足了学生的上机实验问题,同时也为大数据科研提供了一定的支撑。

气象大数据云平台的网络安全防护体系设计

针对气象大数据云平台存在的网络安全现状需求,设计一种基于持续自适应风险与信任评估、安全责任共担模式的安全防护体系,以保护气象大数据云平台为对象,围绕安全管理、安全技术和安全运营开展覆盖决策规划、纵深防御、监测预警、安全响应和安全评价5个阶段的安全防护,全面保障气象大数据云平台的安全运行,为今后气象云平台网络安全防护提供一种新思路和新模式.

基于大数据云平台的电力能源数据采集与应用探究

在当前的社会发展中,各行业的发展速度非常快,行业的快速发展带动了电力行业的发展。电力企业在发展的过程中要做好电力能源的采集和研究管理工作,充分发挥大数据技术的作用,全面提高系统运行的实际水平。基于此,主要针对大数据云平台应用背景下电力能源数据采集和应用的相关内容进行分析,力求全面提高电力系统运行的稳定性和水平。

基于“云+端”长序列结构化数据处理应用设计与实现

为提升长序列地面观测数据统计和处理支撑能力,加快关键业务平台“云+端”云化转型,基于“天擎”资源数据环境和云化融入标准,通过直连库方式搭建加工流水线定时任务处理流程,采用SpringBoot+Mybatis框架研制众创接口提供数据实时查询服务,数据处理流程监视和告警纳入“天镜”管理,实现对原Hadoop框架构建的业务平台的全面云化融入改造。云化应用表明,云化后节省硬件和存储资源,数据实时查询效率提高30%以上,开发模式简捷高效具有良好的拓展性,为相关海量结构化数据统计场景提供技术思路与借鉴。

基于气象大数据云平台的降水特征分析——以成都近30年降水数据为例

随着经济的发展、城市化进程的不断推进,提高农业现代化水平和效益成为关键。本文是基于气象大数据云平台(简称“天擎”)所共享的数据、接口,结合成都地区的地理位置,选取15个气象台站,对其近30年降水数据进行整合处理,利用一元线性回归模型拟合得到降水折线趋势图,并用M-K检验法对其进行纠正,从而得到成都地区近30年降水量的变化趋势及分布特征,可为成都的农业农村现代化发展提供精准参考及有效助力。

基于BIM和大数据云平台的智慧城市研究与应用

随着人工智能时代的到来,智慧城市已成为社会发展趋势。BIM技术、大数据云平台在智慧城市建设中有着广泛运用,有利于构建智慧交通网络,完善城市通信基础设施,加快智慧楼宇、智慧社区建设,为市民提供更加便捷、舒适的服务。BIM技术在城市基础设施建设中发挥着重要作用,可以构建三维立体模型,构建安全、舒适、节能、环保的城市建筑。大数据云平台在城市通信网络、大数据安全等领域有着广泛运用,有利于提升城市管理效率。文章分析了BIM技术和大数据云平台在智慧城市建设中的应用,以期推广这两个新技术,进一步加快智慧城市建设步伐。

视频大数据云平台跨境应用的研究与实践

文章介绍了视频大数据云平台跨境应用的研究与实践情况,从项目背景、需求分析、建设思路、应用效果四个方面进行了详细介绍。平台采用国际化多语言(i18n)、IPSec隧道、SDWAN、私有云(VPC)、业务流程管理(BPM)等规范和技术,对国内成熟的基于视频监控、物联网(IoT)、人工智能(AI)、大数据技术的视频可视化服务平台完成改造和移植。平台目前已服务于老挝境内的客户,提供对客户重要区域、重要资产、重点环节、重点风险的智慧可视化闭环监管能力。

内蒙古自治区气象大数据管理云平台设计与实现

文章介绍了内蒙古自治区气象大数据管理云平台利用分布式存储与计算架构,构建数据采集子系统、数据加工处理子系统、数据存储管理子系统、业务监视子系统、数据共享服务子系统和数据展示子系统,实现部门内外常规气象观测资料、服务产品、行业部门相关数据的集约化、标准化、统一存储管理,对接内蒙古自治区政府“云上北疆大数据平台”和“政务资源共享平台”,完成了行业的互补和延伸,开辟了气象信息化发展的新舞台。

基于气象大数据云平台的区域站监控预警平台设计

随着气象现代化高速发展,区域气象观测站在全国建设得到了扩大发展和应用,自动气象观测站实时的观测资料越来越及时,对标“监测精密,预报精准,服务精细”,对增强测预警手段和决策服务也提出了更高的要求。根据气象业务对突发灾害性天气监控、预警发布的需要,采用JavaScript和html5作为开发工具,开发了基于气象大数据云平台的市-县级区域气象观测站监控预警平台。采用HTML的Canvas绘制菏泽市地图信息,叠加市、县界、区域气象观测站图层,从气象大数据云平台的接口获取区域气象观测站的实况资料,实现小时温度、降水、风向、风速的实时显示和实时访问,当气象要素达到气象预警标准时可触发实时报警;同时可直观观察各个区域气象观测站点的过去24小时温度、降水、风速、风向气象要素演变曲线。该平台对提高气象区域站点数据利用率、区域站运行监控、中小尺度的灾害性天气系统监测等方面发挥了不可替代的作用,对提高气象部门防灾减灾能力,更好的为当地政府服务决策发挥着重大的作用。

银行大数据云平台建设与实践

通过集成大数据底座、人工智能基础平台和智能分析工具,运用统一的技术架构实现了大数据平台和各垂直领域人工智能平台的融合,构建大数据云平台,为上层应用提供“数据+智能”服务能力,实现业务场景化、轻量级落地。

基于气象大数据云平台的MUSIC接口数据服务研究

MUSIC接口提供全面数据获取功能,是气象数据统一服务接口,已成为气象工作者获取气象数据的主要通道之一,对气象服务发展至关重要。而业务和科研工作者获取数据的需求以及数据安全需求逐步提升,从云平台获取数据难度随之提升,针对此情况,基于Python语言,对MUSIC接口服务进行研究并开发程序,对从云平台申请的数据实现了高效下载和存储。对相关人员具有一定参考意义。

基于青海气象大数据云平台的数据服务接口

气象大数据云平台是全国综合气象信息共享平台(CIMISS)的增强版,全面提升了CIMISS的能力,将替换CIMISS对业务的支撑,其数据服务接口为了业务平滑使用尽量保留了CIMISS数据服务接口的功能,但在性能.上有了很多改进。本文通过对气象大数据云平台的气象数据统一访问接口(MUSIC)的介绍,总结了CIMISS和大数据云平台数据服务接口的差异,以供大数据云平台为数据环境进行技术升级改造和业务应用的人员参考。