基于大数据管理架构的油气管道数据监测分析模型

针对传统油气管道数据监测方法检测准确度低的问题,设计基于大数据管理架构的油气管道数据监测分析模型。首先构建模型的整体架构,通过大数据支持收集和整理管道数据,对其进行预处理,确定关联排列行数和列数;引入布里渊传感技术,基于分布式光纤传感器和传感数据,通过光纤取代传统数百个传感点构成的数据生成回馈传感序列;通过计算模板和光纤反馈情况,生成距离数据,依靠散射点射谱关系距离,确定当前油气管道各处距离值,通过比对即可确定当前管道是否有弯曲情况,实现管道数据的监测。实验数据证明,基于大数据管理构架的油气管道监测分析模型在管道弯曲监测实验中,监测准确度更高,具有明显的监测优势。

基于CCSDS-SOIS的航天器数据管理系统体系架构的探讨

为解决航天器数据管理系统体系架构中,由于接口方式和协议不一致以及设计的多样化,导致难以沟通和重用的问题,CCSDS(The Consultative Committee for Space Data Systems)的SOIS(Space Onboard Interface Services)工作组提出了体系架构,并制定了相应的业务推荐标准文本.结合SOIS架构,概括介绍了ESA(European Space Agency)提出的SAVOIR(Space Avionics Open Interface aRchitecture)架构,NASA(National Aeronautics and Space Administration)提出的cFE/cFS架构,以及我国对SOIS的跟踪研究情况,并对这几个架构进行了比较和分析.这几个架构的共同点在于对层次化、模块化、接口标准化和模型化的重用特征在认识上是一致的,但是在具体设计上由于各自的背景不同而不尽相同.另一个共同的认识是将电子数据单(Electronic Data Sheet,EDS)作为架构的设计重点之一,为此对数据设计的两个主要概念,管理信息库(Management Information Base,MIB)和EDS之间的关系和设计思路进行了分析说明.最后展望了空间数据系统体系架构的一些发展趋势,认为基于EDS和MIB的数据设计将成为主要研究内容之一,并且SOIS架构的实践应结合自身的特点来开展.

数据仓库元数据管理研究

元数据管理是基于决策支持的数据仓库技术研究的重点与难点之一。本文首先对数据仓库中元数据的定义,分类,作用和生命周期进行了探讨,其次对典型的数据仓库元数据管理架构进行深入研究,并提出了一种基于信息供应链(ISC)的双向联邦式的元数据管理架构。最后,指出了数据仓库元数据管理的未来研究方向。

网络建维数据管理及应用探讨

企业信息化是提高企业核心竞争力的必然选择。本文从一线建维角度出发,对电信企业信息化过程中建维数据管理方面存在的问题进行了分析,提出了网络建维数据管理架构思路,进行了实践探索,并对下一步建维数据管理工作做了探讨。

校园计算机系统中的大数据分析策略

阐述数据治理体系的特点,探讨基于大数据的职业教育数据管理体系架构的应用,包括管理平台总体架构、系统标准管理、数据采集及清洗、数据质量管理,分析数据的可靠性、一致性、合规程度及访问有效性,从而确保数据能够合理应用于教学流程的规范、教学策略的规划、教学质量的提升。

面向复杂数据的对象存储系统

主要研究了数字图书馆应用中数字对象的有效存储和索引机制,提出并设计了针对数字图书馆的数据仓储系统PuntTable。PuntTable使用非关系模式存储和管理对象,并且通过在数据对象内部建立索引来支持查询。PuntTable包括两个主要模块:一个是PuntStore,一种有多存储引擎的数据存储系统;另一个是PuntIndex,一种支持多种索引方式的索引系统。PuntTable实现了高吞吐量和低延迟对象存储,数据对象的索引和内容都可以选择最为合适的存储层来进行存储。使用实际数字图书馆中的数据对PuntTable进行了测试和评估。在测试所用的数据集中,每个数据都采用不同长度,使测试更加接近实际应用。实验结果显示,对于不同的数据集使用不同的存储模型可以显著增大数据库系统的吞吐量,并且有效减少延迟。

基于云-边-端协同的区域级风电场大数据中心数据管理框架及优化运行方法

区域级风电场大数据中心面临运行能效低、交互性差、资源重复建设等问题,难以满足数字化特征凸显的新型电力系统对数据实时计算、绿色计算的需求。该文系统性梳理了风电场大数据中心典型数字化业务的类别、算力敏感性特征和可调节潜力,构建了基于云-边-端协同技术的数据管理架构,从数据交互、业务执行、资源调度和质量治理4个维度提出了大数据中心优化运行方法。算例仿真分析了所提架构在数据传输、存储和能耗等方面的性能,结果表明:相较于集中式架构,云-边-端协同可为大数据中心云服务器节约350%的存储容量,降低21.04%的能耗,验证了所提架构在实际工程中应用的有效性和合理性。