双层索引驱动的隧洞海量点云高效管理方法

针对隧洞表观性态监测,三维激光扫描获取的点云具有数据量巨大、非结构化以及狭长线状非均匀分布等特点,给隧洞点云数据处理极大的压力,也制约了隧洞工程点云监测应用的发展。为此,本文结合隧洞工程空间分布特点,提出一种基于双层索引结构的隧洞海量点云管理方法。该方法设计了一种基于Hough变换的隧洞水平中线粗提取方法,指导隧洞点云数据沿水平中线进行点云自动分段;而后利用“自下而上”的归并构建策略建立分段点云八叉树索引。在此基础上,利用非冗余的多层次细节(LOD)建模方法和内外存动态调度技术实现海量点云数据快速可视化。实验结果显示,本文方法有效提高了隧洞点云水平轴线提取效率,基于双层索引结构的隧洞点云管理在点云检索、海量点云数据可视化等方面表现出优异性能。

Linux环境下基于Oracle Spatial的分布式海量空间数据处理平台的设计与实现

随着地理信息系统和网络技术的快速发展 ,数据仓储技术的广泛应用 ,使得GIS数据处理呈现多用户、分布式和网络化的特点。该平台采用面向实体的空间数据模型 ,突破了以图层为基础的空间数据处理模式 ,实现了跨图幅计算 ,较好地实现了第四代GIS所提出的面向实体的空间数据组织、统一的海量存储和分析处理。

基于B/S架构的海量空间数据并行上传方法研究

传统海量空间数据并行上传方法直接对空间数据上传系数指标进行计算,未对空间数据进行划分,造成上传效率低。文章提出基于B/S架构的海量空间数据并行上传方法。对空间数据进行划分,根据划分结果计算空间数据上传系数指标,从而进行空间数据预处理,基于B/S架构空间数据上传流程实现海量空间数据并行上传,并设计对比实验。实验结果表明,该研究方法具有更高的上传效率,更具有应用价值。

国土调查移动数字管理系统关键技术研究

从国土调查数据组织、大规模国土数据调度策略、空间索引和专题索引构建三个维度对数据存储、调度、渲染、检索和管理进行研究,并基于Android系统开发了一套国土调查移动数字管理系统。以湖北省第3次国土调查数据为例验证,实现了新型的、线上线下一体化的、支持移动办公的湖北省国土调查移动数据管理系统建设。实验证明,该系统可有效提高国土调查工作效率,并解决移动办公业务需求。

海量空间数据的分布式存储查询优化分析

海量空间数据的分布式存储查询优化可提高数据分析的有效性,以海量空间数据为中心,从服务范围查询性能的角度,建立以SPark平台与MySQL数据库为中心的海量空间数据分布式平台,并引入索引机制,利用空间编码技术以及分布式存储搭建海量空间数据存储模型,对海量空间数据的存储查询进行优化,旨在进一步提高海量空间数据的查询响应速度与应用效果。

面向网络的海量影像空间数据在线分发技术

阐述了基于J2EE的海量空间数据在线分发系统原理和关键技术 。

面向物联网海量传感器采样数据管理的数据库集群系统框架

物联网是目前国际和国内新兴的一项热门技术,正在给人们的生产和生活方式带来深刻的变革.物联网在带来诸多好处的同时,也给软件乃至整个信息技术领域带来了前所未有的挑战.该文针对物联网传感器采样数据管理中所面临的数据海量性、异构性、时空敏感性、动态流式特性等问题,提出一种面向物联网海量传感器采样数据管理的数据库集群系统框架IoT-ClusterDB.实验结果表明,IoT-ClusterDB具有良好的传感器数据接入与查询处理性能,为物联网海量异构传感器采样数据的存储与查询处理提供了一种可行的解决方案.

全球多分辨率数据模型的构建与快速显示

在总结并分析国内外已有的多种全球数据浏览和显示系统的基础上,采用了全球空间四叉树模型与“视点相关”的处理方式,并将多线程理论有效地应用到超大数据的管理与显示中,建立了合理的多线程访问机制,利用金字塔瓦片数据集管理影像与DEM数据,实现了局域网内的分布存储与分发,并开发了全球海量数据管理客户端实验系统GlobalView。

基于嫦娥一号CCD相机和激光测距数据的月球三维可视化系统

嫦娥一号成功地获取了月球表面高分辨率和高清晰的地形和影像数据,为建立全月球三维场景的可视化提供了真实而丰富的数据源.通过分析大规模空间数据的三维可视化,介绍了所设计和实现的月球三维可视化系统的功能、体系结构和工作流程,并对系统的关键技术进行了重点讨论.实例结果表明,月球三维可视化系统在空间数据可视化建模、栅格数据和矢量数据的组织方式、极区数据的三维表现,以及数据的动态调度和三维场景的实时渲染技术等方面都有独特的解决方案,实现了全月球大规模数据的无缝组织、高效访问和无缝浏览.

基于群集技术的多服务器地理空间数据管理

分析了现有海量空间数据网络管理技术在系统整体性能方面存在的局限,引入群集技术,充分利用群集技术的高性能计算和高可靠性的服务器架构等特点,优化设计了基于群集的多层GIS应用服务器体系结构,结合常规海量空间数据库管理的空间索引分区、远程内嵌过程等效率策略,提出了一套基于群集的海量空间数据多服务器管理技术.通过基于Oracle真正应用群集(realapplicationcluster,RAC)和Oracle9i应用服务器(9iApplicationServer,iAS)的应用实例,验证了基于群集空间数据管理技术的可行性及其高性能.

矿井工业以太网大流量负载实时调度策略

研究了矿井工业以太网在大流量视频负载下的时延效应和网络通信的实时调度策略.在分析工业以太网系统大流量视频负载下网络时延的理论计算方法的基础上,建立了矿井工业以太网模型,通过加载与煤矿现场数据流量近似一致的视频负载方法,对大流量视频负载分别在100Mbps和1000Mbps工业以太网络平台上的网络时延特性进行仿真试验.仿真结果表明:1000Mbps工业以太网具有更短的网络通信时延和更好的实时性,并据此提出了在有限的网络带宽下传输大流量视频负载时,减少网络时延、实现实时传输与控制的负载调度策略,其仿真结果表明,采用权值分配调度能够有效地减小网络通信时延,实现实时传输与控制.

空间数据多服务器群集及高性能实现策略

针对当前海量空间数据网络化管理的特殊要求,分析了改善新一代地理信息系统(GIS)整体性能所需要解决的问题,剖析并引入了群集技术,充分发挥群集技术在高性能运算和高可靠性多服务器架构等方面的技术优势,优化设计了GIS群集多PC服务器体系架构,并结合空间索引分区等常规海量空间数据库管理策略,开发了一套实用化的高效空间定位、多缓冲策略等基于群集的多服务器海量空间数据管理技术。Oracle真正应用群集(RAC)数据库系统在图库管理中的应用,验证了群集空间数据多服务器管理平台的整体性能优越性。

基于网格的分布式虚拟环境仿真海量数据管理

分析了分布式虚拟环境仿真的特点,提出了基于网格的分布式虚拟环境仿真的海量数据管理框架。该框架结构采用分层结构,自底向上依次为网格节点、高性能通信系统、数据存储与处理系统和计算系统。给出了一个基于上述体系结构的原型系统。对该原型系统的仿真结果表明,该海量数据管理体系结构设计符合虚拟环境仿真实时性、稳定性和高可靠性的要求。

基于HDFS管理MapGIS K9瓦片地图集的研究与实现

关系型数据库在管理海量空间数据时遇到诸多瓶颈,HDFS(Hadoop Distributed Filesystem)通过将大数据分割为多个小数据块,并将其分别存储在多个数据节点组成的分布式集群中,成为一种新的存储海量空间数据的方法。使用HDFS作为平台,利用数据结构类型MapFile设计一种管理MapGIS K9瓦片地图集的方式,并进行实验。实验表明用HDFS管理海量瓦片地图比传统方式管理更易扩展,更加安全,效率更加高。

基于MongoDB的海量空间数据存储和并行

目前在分布式环境下对于海量空间数据的存储和处理大部分是基于传统关系数据库的,对于二三维的海量空间数据存储效果不理想,其独有的关系模型制约了对海量空间数据快速访问和处理的能力。因此,分布式环境下如何利用非关系数据库和并行处理技术实现海量空间数据的高效存储和快速处理具有重要的研究意义。

云技术在电网资源调度系统中的应用研究

随着社会经济的持续发展,电力系统正朝着智能电网的方向发展。在此状态下,电力资源调度呈现出信息海量化、分布化、处理自动化的特点。而面对如此规模的数据处理过程,如何有效地实现信息的集成、分析、计算和存储,就成为电网资源调度的难点。结合云技术的相关特性,将云计算引入到电网资源调度系统中,并利用动态迁移调度算法实现了物理云资源的平衡使用,从而为电力调度提供了更为智能化的决策支持和实现方式。

一种面向复杂地理空间栅格数据处理算法并行化的任务调度方法

随着并行计算技术的成熟,地理空间栅格数据处理算法的并行化研究成为新的热点。聚焦于处理流程包含多个计算步骤的复杂地理空间栅格数据处理算法,基于空间计算域理论,提出了一个随着算法处理流程而动态变化的任务调度方法。实验证明,该方法在算法流程的每一个计算步都会调整任务分组方案,因此相比于传统任务调度方法,任务调度的负载均衡效果更好,并行算法程序的运行时间更短。

基于HBase的分布式空间数据库技术

针对在大型地理信息系统(GIS)中,需要对海量矢量数据和栅格数据进行存储并对高并发的用户查询请求提供高效响应,传统的设计方案难以满足需求的问题,提出一种使用基于内存存储的分布式数据库HBase存储空间数据,并设计基于GeoHash的分布式空间索引,实现了矢量空间数据与栅格空间数据的分布式存储与快速查询.实验表明,该方法提升了海量空间数据的查询速度.

一种基于剖分的空间数据存储调度服务模型

随着空间数据应用领域深度和广度的扩展,空间数据在组织、存储、更新、应用等方面存在速度、效率等难题。针对上述问题,基于地球剖分组织理论,结合面向客户端聚合服务的G/S模式架构,研究并提出一种空间剖分数据存储调度服务模型。给出了该模型体系架构、数据访问流程,设计了模型的地址编码结构及地址解析过程,形成了一种有效的"数据分散存储,客户端信息汇聚"的空间剖分数据组织管理、按需整合、快捷调度的机制,实现并验证了服务原型系统,其具有一定的理论意义和应用价值。

行星数据编目模型的设计与实现

根据行星数据系统(PDS)标准规范、行星数据特点及PDS元数据模型,设计一个行星数据编目模型。通过扩展传统数据编目模型支持数据展示和空间查询,采用对象-关系数据库的方式存储编目信息以实现数据的管理、归档和分发。通过建立行星数据编目检索系统验证该模型的正确性和有效性,并表明该模型能提供一致的目录访问接口,使用户方便快速地检索到感兴趣的行星数据。