基于多中心集群协同计算的大数据平台技术研究与应用

中国电信面向横跨多个地域、拥有众多集群的大型政企机构,推出可以高效协同各类资源的广域大数据架构体系——云边智算大数据平台。该平台从集群维度对数据分区进行逻辑抽象,将独立分散的数据集整合为一个“虚拟数据集”,实现了一对多的数据集映射管理。同时,该平台的计算负载数据集具有泛化特征,能够灵活应对不同场景下的数据处理需求。另外,该平台以关系表达式为中间表示,支持多种计算引擎和调度系统,能够在复杂的大型数据处理高容错场景中高效地完成批处理任务负载。目前,云边智算大数据平台已在多种应用场景中落地,平台在5G Core能力调度子系统(5GC)多中心大数据作业开发、运营方面提效17%,且已实现8省前置大数据集群共计42 PB存储、84 TB内存、24984 VCore计算资源的协同调度,日均完成80308次前置-核心两级任务调度。

煤矿安全生产一体化协同管理平台研究与应用

针对山东能源集团有限公司(以下简称“山东能源集团”)管理所涉及的板块多、企业多、跨域广、业务流程体系复杂等问题,山东能源集团结合体系工程方法论,统筹协调、整体规划、集约建设,充分利用物联网、大数据分析治理、云计算等技术,建设了覆盖山东能源集团各管理层级安全、生产、调度、应急、生产技术等业务范围的煤矿安全生产一体化协同管理平台。通过在山东能源集团及权属的175家单位上线实际应用,不仅形成了采、存、治、用工业大数据应用体系,实现了安全生产全业务协同管理,打造了多层分工、三级联动安全应急管理应用,而且通过数字化技术手段提升了管理数据协同能力和水平,实现了数据要素赋能。

企业改组背景下的协同科研管理平台建设研究

为有效整合科技资源,破解改组企业研发机构异地办公、流程差异等难题,实现科技创新活动跨组织、跨地域一体化协同,提升科研活动质效,文章结合企业特色化科研管理需求,开展科研管理平台架构、科研管理业务流程、科研管理权限研究等工作,利用信息化、数字化技术,建成了横向覆盖各成员企业、纵向贯通科研管理全过程的科研管理平台,解决了一系列困扰企业的创新管理问题。

煤炭大数据平台建设的关键技术及管理协同架构

分析了煤炭大数据平台应用的现状及需求;从细粒度、广范围的数据获取、灵活可扩展的数据存储、多模态的数据处理、专业的数据可视化、高质量的数据管理5个方面详细阐述了煤炭大数据平台建设的关键技术,为煤炭大数据的采集、存储、分析、管理提供基础;提出了煤炭大数据管理协同架构,主要从技术和管理2个层面为煤炭大数据平台的建设提供参考,为大数据管理的顶层设计提供了思路。

FAST科学数据管理平台统一身份认证的研究与实现

随着网络信息化技术高速发展,业务系统膨胀式增加,管理多个系统认证安全和记住多个系统账户密码,让系统管理员和用户们备受困扰,集中对多形式、多样化信息端统一授权认证亟待解决。当前通用技术标准为采用微服务与实现OAuth2开放统一认证标准协议架构。500米口径球面射电望远镜FAST作为我国自主研发的世界上最大口径天文望远镜,在天文研究上取得令人瞩目的科研成果。FAST早期科学数据中心为加强数据管理与科普工作,研发了大量多形式的数字化信息系统。基于资源安全访问控制管理和简化管理工作的需要,FAST科学数据平台系统必须实现统一授权认证。论文研究开放认证授权标准协议OAuth2和身份验证标准Open ID Connect工作原理,探讨可行方案Identity Server关键技术。分析了当前Fast数据管理平台管理存在的多样的信息系统状况,设计统一身份认证系统架构,并采用IdentityServer4构建统一认证中心,使用.NET微服务实现认证功能,完成各类Web软件系统、App软件和桌面应用软件的统一身份认证接入。

人工智能在协同设计管理系统中的应用

对人工智能(AI)技术在协同设计管理系统中的应用场景、技术架构、关键技术做了分析,并分享了实际研究案例,论证了AI在协同设计管理系统中应用的现实可行性及在对推动设计企业数字化转型方面的重大作用。

注水井分散数据统一管理平台的应用

目前编制油水井方案,所涉及的数据较为分散,不易管理.针对这个问题,借助.NET、SVG等技术和数据库,在充分研究了石油行业海量数据管理平台的数据标准、系统架构和实现模式的基础上,开发出了注水井分散数据统一管理平台.平台在采油二厂的性能测试表明,平台对分散数据的管理具有可行性和高效性.

基于区块链的科技创新平台科学数据管理研究

科学数据是科研活动的原始记录,也是科研成果价值的载体,管理和利用好科技创新平台的科学数据,能够促进科技创新平台体系可持续发展。首先,对科技创新平台科学数据管理价值进行分析。其次,结合国内外科学数据管理现状,提出科技创新平台科学数据管理的特征和关键问题,并分析区块链技术在科技创新平台科学数据管理中的应用逻辑。最后,提出科技创新平台科学数据管理存在的问题和建议。将区块链技术应用于科技创新平台科学数据管理中,能够发挥科学数据价值,提高科技创新平台发展和管理水平,形成良好的协同创新环境。

PaaS架构后端管理平台的云边协同调度算法设计

PaaS架构后端管理平台容器资源由多模块选取,调度任务协同度不高,很难形成统一的调度方案。为此,文中设计一种基于云边协同的PaaS架构后端管理平台调度算法。通过分析PaaS架构后端管理平台资源的特殊性,构建代码构建模块、服务部署模块、后端服务模块的统一云数据特征;再基于相关函数完成模块统一云边数据的特征提取。通过云边协同计算框架进行资源部署和任务调度,优先将云服务中心的预测结果推送至最佳服务器边缘,提升云平台响应及资源利用率。利用帕累托最优对任务进行预测,实现PaaS架构后端管理平台任务的统一调度。实验结果表明,所提算法能够提升PaaS架构后端管理平台的资源利用率及平台响应时效性,满足用户需求。

数据资产管理在可再生能源领域中的研究与应用

研究了数据资产管理在可再生能源领域中的应用,特别关注地热能、氢能、风能和太阳能。通过探讨综合数据的采集、分析和各种能源的数据资产管理,以期揭示如何使电力企业更有效地运用可再生资源,提高能源生产效率,推动电力行业迈向可持续的未来,以及为未来能源需求做好充分准备。

高速公路建设阶段数字化管理平台研究与设计

高速公路作为国民经济赖以发展的基础性先导产业,随着高速公路数量和里程的增加,其建设和管理问题日益凸显。传统高速公路建设项目数字化管理模式存在业务协同不充分、数据利用率不高、缺失信息化技术应用等问题,文章围绕高速公路建设项目管理现状,通过分析高速公路建设项目数字化管理需求,以推动高速公路建设项目全生命周期数字化管理为主线,提出了基于“1+N”架构的高速公路建设阶段数字化管理平台和数据采集共享体系,进一步对高速公路建设管理方式进行规范化、流程化、数字化改进,推动高速公路建设工程智慧化发展。

智慧园区管理平台建设方案浅析

引言.近年来,云计算、大数据、物联网等前沿信息技术在各行各业的应用逐步深入,并趋于成熟。在智慧园区建设中,构建统一管理平台将各自分立的智能化管理子系统集中进行管理的智慧园区管理新模式成为园区信息化发展的趋势。它依托于智能化传感设备(道闸、监控、智能水表、智能电表、消防设施、烟雾监测等),将数据进行整合并可视化,解决传统园区各个分立子系统带来的业务互相独立、数据分散难利用、运营管理效率低、管理复杂成本高、客户服务体验感差等痛点,帮助园区管理者降低工作成本,减轻管理工作压力,提高管理效率,提升服务水平,为园区管理者提供精准、直观的数据支持,为园区入驻企业提供更加便捷高效的服务通道。

基于统一数据平台的电力调度管理系统

以电力调度自动化系统为研究对象,通过对系统存在的数据源多、数据一致性差、存在信息孤岛等现象分析,提出综合运用数据库相关技术建立基于统一数据平台,并以此建立全新的电力调度管理系统,为用户提供标准、准确、快速的数据服务。简要介绍了统一数据平台的体系结构、调度管理系统的设计思路及实现的关键技术等。

云边协同体系下水电厂统一数据平台研究与应用

以大型发电集团数字化转型为应用背景,文章提出发电集团云边协同体系架构,并结合数字水电厂智能辅助决策、人机协同等需求,研究和设计云边协同体系下数字水电厂统一数据平台,详细阐述虚拟化、数据中心、基础服务等内容,同时结合具体应用实例探讨了云边协同体系下水电厂统一数据平台与业务应用的关系。所提的统一数据平台技术架构适用于发电集团云边协同体系下各大中型水电厂,具有良好的推广应用前景。

水务数据统一交换管理平台设计与实现

针对上海"智能水网"的建设对数据交换整合和综合管理的新需求,结合上海水务信息化发展实际情况,介绍水务数据统一交换管理平台的总体方案设计,并对实现多源异构系统间数据交换的关键技术进行了阐述。目前该平台已通过大量应用的检验,并在上海水务系统中得到使用和推广。

注水井分散数据统一管理平台

当前编制油水井方案所涉及的数据较为分散,不易管理。针对这个问题,借助SVG等技术,在充分研究石油行业数据管理平台的数据标准、系统架构和实现模式的基础上,开发出了注水井分散数据统一管理平台。通过在大庆油田采油二厂的测试表明,平台对分散数据的管理具有可行性和高效性。

电力企业统一数据平台数据资产管理研究与应用

加快能源产业转型升级,推进大数据、人工智能等新兴技术与发电产业深度融合,是发电企业数字化转型新发展理念。电力企业对于DCS系统、SIS系统和MIS系统产生的数据需进行统一的优化和管理,以确保生产管理的正常进行。分析电力企业统一数据平台数据资产管理的研究与应用,探讨电力企业如何有效应用统一数据平台对数据资产进行管理,为促进企业的发展提供针对性建议。

大数据提升传统企业协同管理平台应用效能

本文从实际和理论出发,讨论了大数据对于提升传统企业协同管理平台应用效果的作用。文章首先简要介绍了大数据与协同管理平台,随后通过对传统企业协同管理平台现状与问题的分析,引申出大数据在解决当今传统企业协同管理平台困难和瓶颈的方法。最后本文进一步探讨了传统企业协同管理平台的发展趋势。

统一数据库与管理信息标准

随着信息化建设的快速发展,"信息孤岛"的问题逐步引起各方关注,原有的业务系统已经不能满足高校发展的需求,其中,信息标准的不一致是系统整合的最大阻碍,如何有效地整合数据,采用什么形式的管理信息标准,都是各学校结合自身特点所要研究的中心问题。结合华中科技大学统一信息服务平台建设的实践,分析了统一数据库和管理信息标准的关系,并对其做了进一步的探讨。

分布式协同建模技术在综合数据平台中的实现

企业资源整合是电力行业信息化的建设重点。作为调度自动化系统资源整合中心,综合数据平台提供了数据交换、数据整合、数据存储、数据查询等一系列服务。但是仅考虑横向互联的EMS系统模型信息整合,模型信息的准确性、及时性存在很大的局限。为了最大化地实现了多级调度系统之间的模型信息整合和共享,综合数据平台引入了分布式协同建模技术。文章基于IEC 61970标准,提出了分布式协同建模技术在综合数据平台中的实现机制,探讨了分布式协同建模包含的多项关键技术,包括流程化模型信息收集、模型合并、图数模一体化的版本管理、Web Services等新技术。最后文中给出一个实际的工程用例,证明了分布式协同建模技术的实用性和可行性。实际案例是通过建立一套集运行、维护、数据采集、信息交换和信息共享为一体,部署在上、下级调度机构的分布式系统,实现了数据中心横向协同、纵向贯通的模型信息管理。