期刊文献+

煤炭企业数据中心ETL智能化调度研究 被引量:4

Research on ETL intelligent scheduling in data center of coal enterprises
下载PDF
导出
摘要 ETL(Extraction Transformation Loading)作为煤炭企业数据中心建设过程中的重要环节,通常需要人为调度来实现数据的抽取、转换、清洗以及装载,数据挖掘的实时性和便利性存在着很大局限。本文对ETL调度过程进行研究,提出了智能化调度策略,实现了数据调度无需人工干预即可按照预定规则执行。经过煤炭企业数字化矿山建设项目的应用实例检验后,证明了此方案的可行性。 ETL(Extraction Transformation Loading),being an important link in the construction of Data Center,usually needs manual scheduling to achieve the data extraction,transformation,cleaning and loading.Thus it can be seen that there is a major limitation on the real-time performance and the convenience.Therefore,the scheduling process of ETL was studied,and the intelligent scheduling strategy was proposed,without manual intervention.That is to say,the ETL process can automatically perform according to predetermined rules.A datamation construction project of a coal enterprise proved the feasibility of this scheme.
出处 《中国煤炭》 北大核心 2012年第1期78-80,共3页 China Coal
基金 国家科技支撑计划课题--<煤矿安全高可靠性监控系统关键技术研究--监控系统数据可靠性和挖掘技术研究及示范>(2009BAK54B05)
关键词 数据中心 数据挖掘 ETL 智能调度 data center data mining ETL intelligent scheduling
  • 相关文献

参考文献6

二级参考文献31

共引文献37

同被引文献23

  • 1谭文辉.利用VMware实现数据中心服务器虚拟化[J].舰船电子工程,2008,28(6):156-159. 被引量:81
  • 2高国奇.中国银行数据中心建设的研究与实践[D].北京:清华大学,2005.
  • 3斯波尔丁.存储网络完全手册(郭迅华译)[M].北京:电子工业出版社,2007.
  • 4INMONWH.数据仓库[M].4版.王志海,译,北京:机械工业出版社.2006:20.
  • 5荫蒙著,王志海等译.数据仓库[M].北京:机械工业出版社,2006.
  • 6TAN P N, STEINBACH M, KUMAR V.数据挖掘导论(完整版)[M].范明,范宏建,译.北京:人民邮电出版社,2011:79-84.
  • 7WHITe T.Hadoop权威指南(中文版)[M].曾大聃,周傲英,译.北京:清华大学出版社,2010.
  • 8THUSOO A, SARMA J S, JAIN N, et al. Hive-A Petahyte Scale Data Warehouse Using Hadoop[C]// IEEE 26th International Conference on Data Engineering, 2010 : 996-1005.
  • 9BORTHAKUR D. HDFS Architecture Guide [EB/ OL]. [2012-07-221. http ://wenku. baidu, corn/view/ ec30012f453610661ed9f411, html.
  • 10BORTHAKUR D. The Hadoop Distributed File System: Architecture and Design[R]. The Apache Software Foundation, 2007.

引证文献4

二级引证文献13

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部