期刊文献+
共找到7篇文章
< 1 >
每页显示 20 50 100
基于ETL技术的企业信息集成研究 被引量:5
1
作者 夏榆滨 黄善琦 《微计算机信息》 北大核心 2006年第11X期190-192,共3页
本文研究了数据仓库ETL技术,并将ETL技术运用在企业信息集成过程中。本文以PDM和ERP系统为研究对象,阐述了ETL用于数据集成的方法、过程和集成架构。开发了可视化集成开发ETL工具,利用该工具从PDM系统中获取产品结构数据,实现PDM和ERP... 本文研究了数据仓库ETL技术,并将ETL技术运用在企业信息集成过程中。本文以PDM和ERP系统为研究对象,阐述了ETL用于数据集成的方法、过程和集成架构。开发了可视化集成开发ETL工具,利用该工具从PDM系统中获取产品结构数据,实现PDM和ERP系统的数据集成。运用ETL技术能够简化企业信息集成开发,具有低耦合性、易于扩展的特点。 展开更多
关键词 etl 元模型 数据集成 元数据映射 数据转换
下载PDF
基于ETL的金融数据集成过程模型 被引量:5
2
作者 苌程 李善平 《计算机工程与设计》 CSCD 北大核心 2010年第9期2070-2072,2104,共4页
为了将频繁产生的分布在世界各地的金融数据按需地高性能集成,提出了基于ETL(extract-transform-load)的金融数据集成过程模型。对规则引擎原理进行了研究,建立了基于业务转换规则的插件式扩展实现可复用可定制的业务转换过程。利用事... 为了将频繁产生的分布在世界各地的金融数据按需地高性能集成,提出了基于ETL(extract-transform-load)的金融数据集成过程模型。对规则引擎原理进行了研究,建立了基于业务转换规则的插件式扩展实现可复用可定制的业务转换过程。利用事件驱动的交互模型和元数据映射保证非结构化和半结构化数据之间无差异集成,采用增量式数据处理解决数据集成中棘手的性能问题。通过实践项目的验证,对比传统数据集成方法和该过程模型,验证了该过程模型的有效性。 展开更多
关键词 数据抽取转换装载 数据集成 元数据映射 业务规则转换 按需交互
下载PDF
The Semantic Data Dictionary-An Approach for Describing and Annotating Data
3
作者 Sabbir M.Rashid James P.McCusker +5 位作者 Paulo Pinheiro Marcello P.Bax Henrique O.Santos Jeanette A.Stingone Amar K.Das Deborah L.McGuinness 《Data Intelligence》 2020年第4期443-486,共44页
It is common practice for data providers to include text descriptions for each column when publishing data sets in the form of data dictionaries.While these documents are useful in helping an end-user properly interpr... It is common practice for data providers to include text descriptions for each column when publishing data sets in the form of data dictionaries.While these documents are useful in helping an end-user properly interpret the meaning of a column in a data set,existing data dictionaries typically are not machine-readable and do not follow a common specification standard.We introduce the Semantic Data Dictionary,a specification that formalizes the assignment of a semantic representation of data,enabling standardization and harmonization across diverse data sets.In this paper,we present our Semantic Data Dictionary work in the context of our work with biomedical data;however,the approach can and has been used in a wide range of domains.The rendition of data in this form helps promote improved discovery,interoperability,reuse,traceability,and reproducibility.We present the associated research and describe how the Semantic Data Dictionary can help address existing limitations in the related literature.We discuss our approach,present an example by annotating portions of the publicly available National Health and Nutrition Examination Survey data set,present modeling challenges,and describe the use of this approach in sponsored research,including our work on a large National Institutes of Health(NIH)-funded exposure and health data portal and in the RPI-IBM collaborative Health Empowerment by Analytics,Learning,and Semantics project. 展开更多
关键词 Semantic data Dictionary Dictionary mapping CODEBOOK Knowledge modeling data integration data dictionary mapping language metadata standard Semantic Web Semantic etl FAIR data
原文传递
大数据环境下基于元模型控制的数据质量保障技术研究 被引量:10
4
作者 杨冬菊 徐晨阳 《计算机工程与科学》 CSCD 北大核心 2019年第2期197-206,共10页
数据集成环节,越来越丰富的异构源数据给集成后数据质量的提升带来了新的挑战和困难。针对传统ETL模型在数据集成后出现的数据冗余、无效、重复、缺失、不一致、错误值及格式出错等数据质量问题,提出了基于元数据模型控制的ETL集成模型... 数据集成环节,越来越丰富的异构源数据给集成后数据质量的提升带来了新的挑战和困难。针对传统ETL模型在数据集成后出现的数据冗余、无效、重复、缺失、不一致、错误值及格式出错等数据质量问题,提出了基于元数据模型控制的ETL集成模型,并对数据集成过程中的各种映射规则进行了详细的定义,通过将抽取、转换、加载环节的元模型和映射机制相结合,能够有效地保证集成后数据的数据质量。提出的元模型已经应用到科技资源管理数据集成业务中。通过科技资源管理数据集成实例分析,验证了此数据集成方案能够有效地支撑大数据环境下数据仓库的构建和集成后数据质量的提升。 展开更多
关键词 大数据 数据仓库 etl 元数据模型 映射 数据集成
下载PDF
基于元数据驱动的通用数据迁移工具 被引量:10
5
作者 任庆东 李天阳 +1 位作者 袁满 许翰文 《大庆石油学院学报》 CAS 北大核心 2011年第1期76-80,119-120,共5页
为解决企业数据模型升级需要在数据库间实现数据迁移的问题,创建基于元数据驱动的通用数据迁移工具,分析数据抽取、转换和加载体系结构,采用元数据驱动技术,结合企业数据迁移需求,定义数据迁移通用框架模型体系;处理映射模式的元数据表... 为解决企业数据模型升级需要在数据库间实现数据迁移的问题,创建基于元数据驱动的通用数据迁移工具,分析数据抽取、转换和加载体系结构,采用元数据驱动技术,结合企业数据迁移需求,定义数据迁移通用框架模型体系;处理映射模式的元数据表示,实现用元数据描述与存储映射模式.该方法实现用元数据驱动数据抽取、转换和加载引擎功能,技术与功能在中国石油数据中心大型数据迁移中应用,取得良好效果. 展开更多
关键词 数据迁移 元数据驱动 数据抽取、转换和加载体系 映射模式 元数据映射
下载PDF
基于元模型驱动异构数据统一建模的研究 被引量:2
6
作者 姜楠 文必龙 林宗斌 《电脑知识与技术》 2018年第4X期4-5,8,共3页
随着互联网技术和web的迅速发展,现代企业间以及企业内部需要彼此将资源共享,但是不同企业间的数据源,结构,格式都是不大相同的。由此我们发现多源异构数据不能共享问题。于是提出了基于元模型驱动的多源异构数据的统一建模技术。该技... 随着互联网技术和web的迅速发展,现代企业间以及企业内部需要彼此将资源共享,但是不同企业间的数据源,结构,格式都是不大相同的。由此我们发现多源异构数据不能共享问题。于是提出了基于元模型驱动的多源异构数据的统一建模技术。该技术是通过建立数据字典的元模型对各类的异构数据进行统一的描述,然后通过数据的映射关系在建立起统一数据模型。最后该系统已经成功的应用在多源物品交易平台数据资源整合中。 展开更多
关键词 多源异构数据 元数据 元模型 映射模式 转化规则
下载PDF
基于领域元模型的PLM-ERP数据集成研究 被引量:1
7
作者 黄善琦 夏榆滨 《工业控制计算机》 2006年第5期64-66,共3页
分析了现有PLM-ERP数据集成方法,提出了一种基于领域元模型的集成PLM-ERP数据的方法。通过领域元模型描述PLM-ERP系统间的元数据映射信息和集成业务规则。领域元模型经过解析和验证后,执行异构数据转换,可以实现PLM-ERP系统交换和共享... 分析了现有PLM-ERP数据集成方法,提出了一种基于领域元模型的集成PLM-ERP数据的方法。通过领域元模型描述PLM-ERP系统间的元数据映射信息和集成业务规则。领域元模型经过解析和验证后,执行异构数据转换,可以实现PLM-ERP系统交换和共享数据。领域元模型集成方法具有可重用性,减少PLM-ERP数据集成开发工作量,低耦合性、通用性的特点。 展开更多
关键词 领域元模型 数据集成 元数据映射 数据转换 领域规则
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部