油气管道数据集成及可视化发展现状分析

通过调研国内外油气田智能化探索过程中管道数据集成及可视化的发展现状,分析了国内油气管道数据集成及可视化面临的挑战。基于挑战和智能化管道建设需求,从发展趋势和管道业务2方面提出管道数据集成及可视化未来研究方向。发展趋势重点关注管道数据系统、业务流与工作流的一体化以及生产管理的远程、实时化等方面的建设,管道业务则从感知领域、预测领域、管控领域以及优化领域等方面开展数据集成及可视化研究工作。

基于GIS技术的区域多尺度空间数据集成方法

区域多尺度空间数据,其量较大,其来源、格式、特点、性质不同,数据在逻辑上或物理上的有机集中比较困难,容易导致集成路径拥塞,集成效率下降。为此,提出了一种基于GIS技术的区域多尺度空间数据集成方法。利用GIS技术搭建区域多尺度空间数据挖掘架构,结合数据转换矩阵构建多尺度空间数据库。根据多尺度空间数据库中拥塞窗口状态集合,采用不同策略对数据集成路径进行拥塞控制,通过确定理想集成效率而选择多尺度空间数据集成路径。计算不同集成路径上空间数据特征向量之间的紧密度,结合相异度阈值和空间数据权重构建数据集成函数,实现区域多尺度空间数据集成。实验结果表明:所给方法在有、无人工干预的情况下,集成延时分别控制在7 min以内和5 min以内,数据集成效率较高。

煤矿灾害预警数据集成管理平台研究与应用

针对深部矿井地质的复杂性与灾害的多样性,开展基于海量数据驱动的深部矿井无人化、智能化监测预警技术与装备研究是提高深部煤矿开采安全保障的有效途径。然而,目前煤矿监测系统间关联性差、数据利用率低、数据深入智能分析不够,导致煤矿防灾措施实施针对性差,可能存在防灾措施不到位或过量的现象。针对煤矿灾害监测预警的需求,提出了煤矿灾害监测预警大数据平台架构,设计了结构数据、非结构数据、时序数据等异构数据的混搭数据存储方案,从数据汇集、数据质量、数据融合、数据指标等方面设计煤矿监测数据治理方法,并提出面向煤矿灾害预警应用的多租户数据集市构建技术,从而支撑煤矿灾害分析应用的多样化数据需求。

某集团化医院数据集成平台的安全建设

互联互通、大数据人工、智能、云计算、互联网医院、移动物联网等新技术在医疗行业的广泛应用,有效提高了各项诊疗业务的方便性、快捷性。同时,各类医疗业务系统数量不断增加,各系统间的数据交互越来越频繁且复杂,数据安全性要求不断提高。该研究以某集团化医院数据集成平台的安全建设情况为例,从数据集成平台的安全性出发,分析平台的运行安全、数据安全、访问安全方面存在的问题,并根据以上问题从应用层面、网络层面、主机层面、制度建设层面完善防护措施,通过实践应用并跟踪,有效降低了平台运行的安全风险。

智慧校园背景下高校多业务系统数据集成与共享应用研究

随着高校智慧校园建设的持续推进,各类业务信息系统和Web应用不断完善,产生了数据类型和数据访问方式多样的海量业务数据,实现多源数据集成与共享,成为当前高校智慧校园建设的必然趋势。文章就高校数据资源现状进行分析,提出公共数据中心的建设框架、实现海量数据交互共享的策略以及相对应的数据管理办法。

医联体数据集成与共享平台设计

目的:设计医联体数据集成与共享平台,以提升医联体同质化管理水平和区域整体医疗服务水平。方法:该平台采用基于Hadoop生态的云平台架构,使用Java作为主要开发语言,以Apache HDFS和Apache MapReduce为主要底层技术。整个平台包括数据集成与治理、数据资源仓储、数据服务支持和安全对接中心四大核心模块。结果:采用该平台可实现医联体数据资源的整合和治理,同时提供面向管理、临床、科研的应用服务,充分挖掘医联体数据的应用价值。结论:该平台可完成医联体机构数据资源的整合,实现医联体数据价值释放与信息共享互联。

地质调查业务管理数据集成辅助决策系统架构与关键技术

在地质调查工作过程中,各类信息系统产生了海量的业务管理数据,需要解决这些多来源、高动态、复杂异构数据的有效集成辅助决策问题,驱动管理决策现代化。基于大数据、GIS、数据挖掘等技术,构建了地质调查业务管理数据集成辅助决策的总体架构;通过多源异构数据自动化动态集成处理、基于Hadoop的“湖仓一体”混合式数据组织管理、数据挖掘融合地理智能的分析决策模型等关键技术方法,研发了国家地质调查业务管理大数据系统。系统已接入24个数据源,实现了自动化动态集成,完成了1.5亿余条、20多万档异构数据的一体化组织管理,通过数据和分析服务有效辅助了管理决策。可有效解决大数据环境下数据集成辅助决策问题,提升国家地质调查工作管理决策的效率和水平。

基于MapGIS和明码文件的数据集成

基于MapGIS的数据集成包括数据转换、数据标准化、数据融合及相关研究,综合现有研究认为,数据转换的研究非常深入,在数据标准化和数据融合等方面还有提升空间。本次研究中,以复杂且使用广泛的地质图为例改进数据标准化方法,实现了一次完成数千个地质体规范标注和填色;分析常用数据融合的不同方法的适用条件,补充完善后建立数据融合技术流程;编写明码文件实现小煤柱的批量制作。研究结果表明,改进数据标准化方法、建立数据融合技术流程及充分利用明码文件,能使数据集成的效率大幅提高并拓宽解决问题思路。

基于认知线索的复杂系统数字孪生体异构数据集成管理方法

随着复杂系统信息化程度不断加深,业界对复杂系统不同领域数字孪生体中的异构数据的集成要求越来越高。然而,由于复杂系统领域不断升级,不同领域数字孪生体之间没有统一的数据集成标准,最后造成异构数据交换和使用困难,出现“信息孤岛”现象,严重阻碍了系统研发的信息化进程。为了提升复杂系统数字孪生体之间异构数据资源的利用率,本文提出认知线索的概念,采用开放式生命周期协作服务(open services for lifecycle collaboration,OSLC)规范对数字孪生体异构数据资源进行服务化,并结合基于本体的认知模型构建认知线索作为统一数据源,实现复杂系统数字孪生体的异构数据集成管理。最后本文以自动装填的机械系统为对象开展案例研究,成功验证了所提出方法的可行性和有效性。

三维激光扫描仪与RTK技术在矿山综合测绘及数据集成中的联合应用

该文详细探讨三维激光扫描仪与RTK技术在矿山测绘和数据集成中的联合应用。分析当前矿山测绘的现状和挑战,以及现有的测绘方法和技术的优点及局限性。详细介绍三维激光扫描仪和RTK技术的工作原理,以及它们在矿山测绘中的应用实例和优点。探讨这2种技术的联合应用,包括其理论基础、实际案例和可能出现的问题。讨论这2种技术在数据集成中的作用,以及数据集成的实际案例和效果评估。

基于迭代模糊聚类算法的多源异构电力数据集成

在电力数据采集过程中,极易出现传感器故障、通信中断、数据丢失等问题,使得数据出现质量差异。多源数据格式与语义的不一致增加了数据集成的复杂性,导致电力数据集成效率较低。为此,提出基于迭代模糊聚类算法的多源异构电力数据集成方法。构建数据集成框架,通过语言生成器统一数据格式,利用迭代模糊聚类算法,模糊划分数据。反复迭代处理聚类中心和任意一个电力数据之间的欧几里得距离,获取最优聚类距离,采用频繁项集,获取数据功率谱密度,构建集成目标,设计电力数据集成流程。通过实验结果可知,应用该方法仅存在50 bit的数据集成误差,且电力数据集成效率较高。

人工智能背景下图书馆数据集成研究

在数字化时代,图书馆需要整合海量的数据资源,这些数据不仅形式和类型多样,并且有着不同来源,存在结构或格式上的差异。通过分析图书馆在多模态和异构数据集成时面临的诸多挑战,如数据异质性和复杂性、数据质量和标准化问题、技术集成和兼容性问题等,结合当前各种人工智能技术,如深度学习模型、图神经网络和自然语言处理等,探讨了针对各个问题的应对方法,旨在为图书馆提供高效的多模态和异构数据集成策略。

基于三维GIS的煤矿数据集成自动化监测系统

为了有效监控煤矿中人员、设备的安全性,该文设计基于三维GIS的煤矿数据集成自动化监测系统。采用无线传感器网络监测煤矿,利用各类传感器采集顶板压力、煤尘、瓦斯等监测数据,提出无线传感器节点定位算法,将RSSI测距定位方法与Euclidean算法相结合,确定传感器节点位置;利用OPC技术集成各类异构煤矿监测数据,引入三维GIS监测平台,通过数字高程模型构建煤矿模型,结合无线传感器网络监测结果,实现煤矿监测数据的可视化。实验结果表明,该系统对煤矿数据集成的自动化监测误差能够控制在0.05%范围内,针对异常监测结果进行预警,能够有效实现煤矿可视化监测。

基于大数据平台的煤矿机电设备数据集成管理研究

随着物联网和云计算技术的广泛应用,煤矿开采正向信息化、智能化方向发展。然而,传统的煤矿数据中心面对庞大而分散的数据管理挑战,已经不再能满足智慧煤矿建设的需求。本文选用Hadoop作为煤矿设备数据管理的技术平台,包括数据采集、清洗、传输与存储等关键环节。通过采用OPC UA协议和OPC服务器完成数据采集,并利用基于MapReduce的方法进行数据清洗,以及基于Redis的低延迟数据传输架构,确保了数据的实时性和系统的读取性能,以期为智慧煤矿建设提供了新的思路和技术支持。

基坑工程数据集成平台在轨道交通崇明线工程中的应用

随着信息科技的飞速发展,工程建设领域涌现出来自多方面的数字化监管平台和系统。结合上海轨道交通工程领域数字化建设现状和需求,依托上海轨道交通崇明线越江段项目基坑工程,融合了城市轨道交通工程智慧工地、深基坑工程管控平台、施工规程控制系统及公司OA系统等4个系统,开发了基于BIM技术的以工程项目为中心的工程级数据集成平台,实现了基坑工程各工序工艺施工方案审批状态、“人-机-料”管理和全过程信息记录、工程施工进展实时动态展示和历史数据查询等功能,可为工程施工现场管理层提供准确、全面的工程数据支撑,大大提升工程建设的管理水平。

多元数据集成支持下的配网运营监控系统设计研究

本研究结合电力企业运营需求,基于多元数据集成设计了一套配网运营监管系统,该系统能够对配网各业务系统的多元数据进行全面整合,并以此构建数据量庞大的电网精益管理平台,从而实现对配网业务、设备、资产的全方面监控,在维护配网安全、稳定运营的同时还推动了电力企业的数字化管理进程,对于电力企业长期可持续发展有着重要意义。

新疆生产建设兵团地下水异构数据集成与建库

新疆生产建设兵团(以下简称“兵团”)建设的地下水井电双控工程,运行数据分别存储在各师自建的数据库中,不利于兵团统一监管,迫切需要加快地下水异构数据集成与监管分析。开展兵团地下水机井资源数据整合,主要基于兵团水利一张图综合信息系统,以springboot为系统框架,采用WebGIS的异构系统集成整合,实现机井“一数一源”体系建设,建成统一共享的地下水数据管理中心,有效提升兵团地下水资源监管能力。

基于时空聚类的高校分布式多源异构数据集成方法

传统数据集成方法无法有效处理大规模数据,导致系统性能下降和响应延迟。基于此,本文提出基于时空聚类的高校分布式多源异构数据集成方法。对异构数据进行抽取、转换和加载。通过有序加权平均算子和模糊判决法,将数据源对决策的支持度进行转换,最终完成高校分布式多源异构数据融合,采用密度聚类理论,选择初始聚类中心,完成数据集成。实验结果表明,所提方法的数据筛选时间更短,加速比相对较高,接近理想情况,平均稳定性表现为99.22%。

铁路机务数据集成共享平台设计与应用

为解决铁路机务数据集成难、治理复杂以及共享效率低的问题,文章提出了一套机务数据集成共享平台建设方案。其首先通过多源异构数据采集技术,实现将不同系统数据自动定时采集进入数据仓库中;然后针对数据仓库中数据进行分级、分类标准化治理,形成业务主题及专题库,同时提供了基于安全管控下的实时及离线数据共享模式,实现了数据面向不同场景下的数据共享。通过该平台在现场的建设,实现了节省机车预排检修计划时间70%以上、降低机车整备平均停时约20 min的效果。这表明该机务数据集成共享平台有助于促进多系统数据共享融合、提升铁路机务信息化水平、生产效率和管理能力。

水电站场景下的三维模型数据集成与管理

水电站作为一种重要的能源供应方式,在能源领域的地位逐渐得到提高。然而,水电站的建设和运营过程中如何管理和集成水电站的三维模型数据成为重要的问题。因此,本文设计了一种三维模型数据的集成与管理方法。首先,通过对水电站的建设和运营过程进行分析,确定了三维模型数据集成与管理的需求。其次,提出了一种基于现有三维建模软件和数据库的集成方案,通过将各种数据源中的三维模型数据进行提取、转换和整合,实现了数据的集成和共享。同时,为了提高数据的管理效率,采用了一种面向对象的数据存储和索引方法,将三维模型数据按照不同的属性进行组织和管理。结果表明所提方法能够有效地实现三维模型数据的集成和管理,提高了水电站场景下的工作效率和数据质量。