数字海洋中海量多源异构空间数据集成研究

针对目前海量多源异构空间数据在组织、管理、集成方面的困难以及传统方法在数据转化过程中造成的数据损耗等问题,结合海洋空间数据的特征,提出一种新的海量多源异构空间数据无缝集成技术(SIMMHS)。该技术针对底层海洋空间数据的海量性和异构性,利用FLEX和XML技术,以XML为数据转换格式,使用XML Schema建立了公共模型,利用虚拟空间数据搜索引擎作为中介实现平台,实现了对海量多源异构空间数据的无缝集成。结合数字海洋上海示范区建设项目的实际应用,有效集成了海量多源异构的空间数据,以方便用户的快速浏览查询、系统的三维展示和数据的实时更新。

基于多源异构空间数据的堰塞湖三维动态虚拟仿真平台构建

堰塞湖溃决后通常需要在短时间内对其带来的洪水灾害进行精细化仿真模拟以辅助应急抢险工作,针对传统堰塞湖信息化平台无法实现多部门数据统一管理、数据实时更新等问题,首先总结用于堰塞湖三维建模的多源异构空间数据类型,再确定模型几何数据结构、进行模型尺度划分等,提出堰塞湖多尺度三维数据模型设计方法,针对大区域尺度和局部区域尺度提出堰塞湖三维静态模型构建方法,基于此提出堰塞湖三维动态虚拟仿真方法并对大区域河流演进过程以及堰塞体形成过程和开挖过程进行模拟。最后根据上述方法构建堰塞湖三维动态虚拟仿真平台,以白格堰塞湖为例,验证了平台构建方法具有合理性和可行性。

多源异构空间数据集成的研究

GIS的迅速发展和广泛应用导致了多源异构空间数据的产生,多源异构空间数据的集成已经成为影响GIS发展的关键。针对目前解决多源异构空间数据的集成问题常用的三种方案——空间数据交换、数据互操作和直接操作存在的一些不足,提出一种新的解决方案——GIS中间件。GIS中间件遵循OGC标准,能够嵌入各类遵循OGC标准的GIS客户软件并向客户软件提供统一接口,GIS客户软件通过其统一接口无区别地直接访问和操作异构数据源。目前按照新的解决方案编写的GIS中间件,实现了对ArcGIS数据和大型关系数据库数据的无缝集成,应用于MapGIS平台并取得良好效果。

基于GML-XML的多源异构空间数据互操作引擎研究

在分析了OpenGIS规范和GML1.0规范之后,文章根据空间信息服务的需要扩展了GML1.0的XMLDTD定义,根据扩展后的DTD应用体系成功地开发了一种基于GML-XML的多源异构空间数据互操作引擎,讨论了其结构和功能。该引擎支持OpenGIS技术框架内的空间数据互操作,提供强大的空间服务命令分析功能。使用这种引擎技术,空间信息用户不仅能够进行数据层次的互操作,而且利用其提供的API还可以很容易地开发出自己的空间服务系统。

基于GML的多源异构空间数据集成研究

深入分析了数据格式转换、直接数据访问和数据互操作3种数据集成模式,描述了一个基于GML数据互操作模式的、多源异构空间数据集成模型,并分析了模型的运行机制和关键技术。该模型通过使用相应的GML转换接口把分布式异构空间数据源转化为统一的GML格式文档,通过集成引擎和相应的集成规则对异构空间数据进行有效的集成,实现数据共享的目的。

基于GML的多源异构空间数据集成系统的设计

多源异构的空间数据成为空间信息共享的瓶颈,在网络环境下如何实现多源异构空间数据的集成,成为当前GIS(地理信息系统)发展的一个热点和难点问题。提出了一个基于GML(地理标记语言)的多源异构空间数据集成模型,解决了多源异构空间数据向GML文档的转换,GML与空间数据库服务器的交互以及GML向SVG(可缩放矢量图形)的转换,并使用WebService技术,在Microsoft.NET平台上设计实现了多源异构空间数据集成系统,从而实现了基于GML的空间数据集成和基于SVG的空间数据可视化。

多源异构空间数据集成工具系统的设计与研究

随着GIS的社会化发展,空间数据共享成为一种必然要求,然而由于空间数据格式及模型的多样性,要真正实现空间数据共享,多源异构空间数据集成是一个亟待解决的问题。针对国内相关行业对数据整合应用的需求,设计一种多源异构空间数据集成工具,分析系统的主要技术以及系统总体框架。并以MapGIS数据集成为例,具体分析数据集成的关键技术。该系统满足了国内行业对数据处理的需求,提高了数据的应用效率。

长沙市多源异构空间数据集成共享平台的设计与实现

近几年,随着长沙市规划勘测设计研究院业务的扩展,迫切需要开展地理信息资源的整合,改变传统数据共享方式,提高数据共享效率。本文在分析现有各类专业数据的基础上,给出了一个基于SOA构架构建长沙市多源异构空间数据集成共享平台的方案。最后,对"AutoCAD平台下调用地图服务的功能接口实现方法""服务器端创建Dwg格式数据地图服务的方法"等关键技术进行了探讨。

基于ETL的多源异构空间数据集成技术研究

深入分析了地理空间数据的多源性和异构性的来源以及ETL技术的原理。基于从海量的、复杂的基础地理信息数据和框架数据中提取行业相关应用的空间数据的目的,尝试将ETL技术和GIS技术结合的方法,对不同来源、尺度、类型、组织方式及软件支撑平台的基础地理空间数据,在预先定义好的抽取规则和转换规则基础上,通过数据的抽取、清洗、转换,最后装载到框架数据库的实验。实现了空间数据的共享和集成。

能源工业互联网海量数据采集方法研究

为解决能源工业互联网海量多源异构数据采集并发数量低、采集速度慢的问题,提出了一种能源工业互联网海量数据采集方法。首先,计及各类能源工业设备的数据结构、采集频次和采集策略等因素,设计可扩展的多源异构数据采集架构;其次,建立能源工业互联网采集控制策略,采用多时间尺度控制方法,实现多源异构能源数据的高速采集;在此基础上,对能源工业互联网采集数据进行质量评估;最后,在某城市应用所提方法,其采集准确率约为99.9%。结果表明:所提方法可实现多源异构能源数据协同采集,提高能源工业互联网的采集效率与准确性。

区县级多源异构空间数据共享平台研究及应用

针对区县级空间数据凌乱、共享程度低、应用效率不高等现状,充分考虑区县级政府部门对多源异构地理空间数据资源共建共享的需求,基于Web Service和ArcGIS Server技术,构建了包含数据管理、运维管理、共享交换、公共服务等四大子系统为核心的多源异构空间数据共享服务平台框架,并在佛山市顺德区成功应用,实现了区县级多源异构空间数据的集成与共享。

多源异构海量数据实时处理平台研究与应用

目前许多业务部门以多种形式记录各种海量且异构多源的业务数据,在进行高端决策时,对数据的读取及多维计算分析等方面效率较低,特别是对具有"时空"特性的数据处理。针对这类数据的多源异构性、海量性、高度时空性等特点,结合数据实时性需求,设计并实现了"多源异构海量数据实时处理平台"。该平台从多途径实时获取、处理多种海量数据文件,并实时保存到数据库,方便其他各业务系统更加直接、实时地使用各种实时数据,最终实现各业务系统间的多源异构海量数据的实时共享,同时该平台对其他领域的复杂数据处理也具有很好的参考价值。

SQL Server空间数据与地理信息系统平台的无缝集成

该文使用空间数据中间件技术实现在MapGIS K9平台上SQL Server空间数据的无缝集成。设计了MapGISK9和SQL Server空间数据交换映射模型,通过实现这个映射模型,SQL Server空间中间件避免了复杂的数据转换和信息丢失,从而实现了无缝集成。与此同时,中间件提供了统一的接口,使客户端软件可直接访问和操作异构的空间数据。此外,这个中间件使用了缓存机制和空间索引来优化数据访问和操作的性能,大大提高了中间件的实用性。

基于模板映射的Web空间数据解析研究

本文对互联网中的空间数据进行了分类,针对多源异构的Web空间数据更新的问题,研究了基于模板映射的解析方法,定义了基于XML的解析模板,探讨了基于模板映射的Web空间数据解析流程。实验结果表明,该方法能够实现多源异构Web空间数据的自动化、高准确度解析,在解析召回率方面优于传统正则表达式解析法。

基于中铁贵州智慧社区管理的多源异构数据集成方法

建筑运维阶段所产生的数据由于其产生的环境、系统和条件差异而多具备多源异构的分布特点。想要实现社区的智慧化及高效化管理,必须采用基于物联网和人工智能算法等方法,对来源不同且结构各异的运维数据进行智能化采集和标准化转换,使其集成在统一的数据管理平台上。以搭建集成社区运维管理过程中的环境、资源和资产等数据的规范化转换与传输平台为研究重点,提出了基于ETL元数据和BP混合自适应神经网络的数据集成管理框架,提高了社区数字化及智慧化运维管理水平。

地理空间数据集成方法在农作物空间数据服务中心系统中的应用

地理空间数据是农业决策系统的数据基础,能够准确、及时的反映种植区域的农作物时空动态变化信息,而这些变化信息随着时间的推移,会构成海量的数据集,且这些数据具有多源、多时空、多尺度以及结构多样等特点。针对地理空间数据具有海量、实时、多源的特点,提出利用组件式中间件的方法,开展数据集成方面的工作。

矿山系统空间数据仓库建设初探

分析了矿山系统传统数据存储特点,认为传统数据库已无法满足矿山管理应用需求,数字矿山的建设急需建立一个方便存储和提取的工具。矿山数据大多为空间数据,因此,空间数据仓库的建立能解决矿山数据的收集和存储问题,实现多源数据的管理和分享,为决策部门提供详实而准确的数据。

基于WebService的林业分布式多源异构数据集成技术研究

根据林业信息系统数据特点,在不改变原始数据的存储和管理方式下,提出一种基于WebSer-vice的异构数据集成模型,利用GML进行空间数据集成,使用SVG实现空间数据可视化,建立GML&SVG的WebGIS应用模型,该模型能较好地实现异构数据源统一、透明的访问,保证数据的完整性、安全性和一致性,为林业多源异构空间数据的集成提供解决方案,有效地实现林业信息异构数据的共享。

多源异构地理数据并行集成技术研究

随由于地理坐标系统、地图投影、数据格式的差异,大规模地理数据的集成、应用极为不便。本文基于多核/集群的高性能硬件架构,探索多源异构地理数据并行集成中的关键问题,主要包括:1设计了统一、开放的地理数据读写接口和空间参考扩展接口,实现对不同地理格式以及空间参考的无缝集成;2深入探讨地理数据并行集成的算法原理,设计符合其特征的数据划分及并行调度策略,提高数据集成效率。在多核并行环境中实现本算法,并利用典型苏南地区数据进行应用实验。实验结果表明,提出的并行技术可实现不同数据格式、不同空间参考地理数据的准确、快速集成,取得了14.38的加速比,从而解决了大规模地理数据的快速集成问题。

多源异构环境下的物联网跨域数据脱敏技术研究

多源异构大数据时代下,大数据呈现出交叉性、多元性、变化性等新特征,更广泛领域的应用对数据处理提出更高的要求。随着物联网技术的不断发展,多样化的物联网应用不断涌现,并服务于人们的日常生活。但物联网产生的数据往往具多源异构特性,这些海量数据作为各领域的重要资源从企业产生的内部数据在生产经营等环节中蕴含着重要价值,到个人产生的数据在健康管理及智慧医疗等应用场景发挥着重要作用。文章基于物联网跨域数据进行分析,对其多源异构特性总结归纳,并针对物联网数据中包含个人隐私信息的敏感数据进行分析,梳理针对此类数据的脱敏技术模型,以便对物联网跨域数据的脱敏处理提供参考。