面向数据仓库的ETL工具的研究与实现

阐述了ETL工具在数据仓库系统的建设过程中所处的重要地位,提出了一个基于工作流引擎的ETL系统设计。系统实现一个轻量级的工作流引擎作为ETL流程的调度中心,利用元数据保存记录ETL流程的信息,创建基于数据库引擎的ETL操作组件库来完成从数据源到数据目标的数据映射,并初步实现了对大数据环境数据抽取的支持,从而构建了一个具有良好可扩展性和开放性的ETL系统。

教学管理数据仓库ETL过程的设计与实现

本文设计了教学管理数据仓库ETL架构,提出了数据仓库的两段迁移法,利用临时数据库来减轻业务数据库压力,有效克服了传统ETL架构的缺陷。本文还详细说明如何利用SQL Server DTS实现这两阶段ETL过程。

基于AI的机房能耗运营管理系统方案研究

在多省能耗管控实践基础上,结合大数据、AI控制,总结了通信机房能耗AI智慧运营系统的建设方案。内容包括:机房能耗AI控制、系统网络部署、功能结构、大数据设计等,为运营商能耗智慧系统建设提供建议。推动机房能耗管理实现“管理节能”+“技术节能”双轮驱动,助力能耗管理工作由管理为主向“智慧运营”的转变。

电网生产管理数据仓库的设计与实现

为了满足对生产管理进行决策分析的业务需求,对某电网公司生产管理进行了需求分析,对生产管理数据仓库进行了总体设计,制定了数据从源系统到数据仓库中进行存储的ETL技术方案,最后利用展现工具查询和分析数据,实现决策支持,为生产管理的决策提供了可靠的依据,同时也验证了数据仓库的设计。

数据仓库在病案管理中的应用研究

目前医院信息系统的建设已取得显著成效,多年的应用也积累了大量数据。如何利用这些宝贵的信息资源为医院管理与决策服务,是医院信息化所面临的重要研究课题。在概述数据仓库技术特点的基础上,阐述了数据仓库的设计方法和设计内容,并针对医院的具体情况和决策需求特点,设计实现了符合医院病案管理决策需求特点的病案数据仓库。最后讨论了病案数据仓库对病案管理系统和病案数据挖掘的影响,并对将来的研究问题作了展望。

数据仓库在宝钢能源管理中的应用

企业级的数据仓库应用日益广泛。本文阐述了宝钢能源管理数据仓库的实施方案,介绍了功能模块和特点及在宝钢能源管理中的应用,并对系统的应用效果作了评价。

决策支持在能源管理中的应用

本文提出了基于数据仓库的决策支持系统在能源管理中的应用,结合能源管理的实际需要,利用数据仓库系统的前端分析服务:联机分析处理(OLAP)和数据挖掘(DM),来实现能源管理中的科学决策,提高"节能降耗"的水平。

基于数据仓库的E-MIS柔性设计与开发

从扬子石化公司能源管理的现状出发,遵循软件工程的原则,开发了扬子石化能源信息管理系统,包括异构平台的数据自动化采集、复杂的能源平衡处理及合理的能源优化分配这三个层面的内容。实现了对全公司范围内能源消耗的控制,进而实现了能源的优化调度和管理,为总公司及时准确地掌握全公司能源信息和进行能源管理提供决策支持。

基于Hadoop平台的轨道交通能效管理系统的建设方案

随着城市轨道交通线网化进程和海量数据的累积,挖掘能效数据的潜在价值以提升地铁能效管理水平、实现节能降耗,对地铁的经济运行具有重要意义。对基于Hadoop平台实现轨道交通能效管理系统的建设方案进行了研究,并分别以历史数据和实时流数据的数据流和功能框图,具体说明了系统的实现方式。给出了基于Hadoop平台的能效管理系统的车站、线路、线网的三层式建设方式,以及组成模块的框架图,并按数据的在线和离线两种方式给出模块的实现方法。同时,在轨道交通能效管理平台中实现了大数据技术的首次应用。应用结果表明,基于Hadoop平台的大数据方案提高了地铁运营的能效管理水平。随着数据量积累和数据分析的深入,该管理系统必将具有更加广阔的应用前景。

数据仓库技术与其在地质调查中的应用

1数据仓库研究背景随着信息化、现代科技与商业智能技术的快速发展,数据量正以指数的形式快速增长,隐藏着巨大的商业价值。近年来,随着传统数据库技术的广泛应用,在同一机构中,通常存在着多个运行在不同软硬件平台上的系统,数据的存储彼此独立,相互隔绝,呈现出多元异构的特征,难以达到数据共享的目的,形成了一个个"数据孤岛"(陈跃国等,2004)。

基于数据仓库的工业企业能源管理系统设计与实现

针对工业企业能耗形势严峻及现有能源管理模式存在的问题,开发了基于数据仓库技术的工业企业能源管理系统。利用数据仓库技术构建多维度能源计量数据分析体系,帮助能源管理系统完成对大数据的进一步处理和优化。通过对能源数据的采集、统计和管理,实现对工业企业能源的精细化管理和监控。该系统能有效提高能源管理水平和能源利用效率,为工业企业综合节能决策提供充分的数据支持。

大数据特征分析的电能计量资产智能库房管理

针对常规电能计量资产自动化智能库房管理方法滞后,提出新型的智能库房管理方法。方法融合了多种现代化先进技术,实现电能计量器具的自动化、智能化和高效管控。构建出库房电能计量资产信息挖掘的数据模型。通过提取正常电能计量资产大数据与异常数据之间的关系,计算出异常电能计量资产大数据特征。然后对电能计量资产大数据进行加权处理,进而实现数据特征提取。通过大数据挖掘流程实现数据挖掘。试验结果表明,方法的准确率、训练集分类精度较高,数据处理能力强。

一种基于统一管控体系的数据仓库的建设方法

数据仓库建设作为信息社会中人们提取信息的关键技术,已经相当成熟。但是传统数据仓库单独建设ETL调度子系统、数据质量管理子系统和元数据管理子系统的数据仓库体系,容易导致配套子系统描述的不一致。文章阐述了一种基于统一管控体系的数据仓库建设思路及其架构,通过构建新的管控体系改变传统的数据处理和管理方式,实现数据“统一采集、统一存储、统一管理、统一运营、统一服务”,解决了传统数据仓库各子功能系统之间无法良好协同、描述不一致的问题。该系统在实际应用中取得了较好的效果,具有较高的应用价值。

经营分析系统应用分析及优化策略

对铁通广西分公司经营分析系统的功能结构、技术方案、应用情况、存在问题进行了详细的介绍,重点论述了通过数据仓库、联机分析、ETL(数据抽取、转换、加载)等技术对系统进行优化的策略,达到提升企业精细化经营的能力。对解决国内数据仓库类系统存在的应用难于开发等问题,有很好的启发意义。