期刊文献+

基于Hadoop的高校大数据平台的设计与实现 被引量:30

Design and implementation of college and university big data platform based on Hadoop
下载PDF
导出
摘要 随着信息化的推进,高校已经建设了很多信息系统,积累了大量数据。如何从海量数据中,挖掘有价值的信息,支撑智慧校园的建设,成为需要迫切解决的问题。文中就高校大数据平台的关键技术和架构进行阐述,结合高校实际情况,设计高校大数据平台架构,通过搭建Hadoop集群环境,以业务系统和平台之间的数据交互验证平台设计的可行性和优势。通过研究,文中为高校建设大数据平台提出一种设计方案,为高校信息化建设提供一种新思路。 With the development of information technology,colleges and universities have built a lot of information systems,accumulated a lot of data.How to mining valuable insight from massive data and support the construction of intelligent campus has become an urgent problem to be solved.In this paper,the key technology and architecture of university data platform are expounded,and the architecture of university data platform is designed.The feasibility and advantages of platform design are verified by the data interaction between business system and platform by setting up Hadoop cluster environment.Through the research,it proposes a design scheme for the construction of large data platform in colleges and universities,and provides a new idea for the construction of university informationization.
出处 《信息技术》 2017年第12期105-109,共5页 Information Technology
基金 北京中医药大学2015基本科研面上课题(2015-JYB-JSMS051) 北京中医药大学2016年基本科研课题(2016-JYB-JSMS-019)
关键词 大数据 HADOOP 分布式计算 Hive 高校信息化 big data Hadoop distributed computing Hive university informationization
  • 相关文献

参考文献15

二级参考文献150

  • 1吴广君,王树鹏,陈明,李超.海量结构化数据存储检索系统[J].计算机研究与发展,2012,49(S1):1-5. 被引量:31
  • 2张引,陈敏,廖小飞.大数据应用的现状与展望[J].计算机研究与发展,2013,50(S2):216-233. 被引量:377
  • 3王庆波,金漳,何乐,等.虚拟化与云计算[M].北京:电子工业出版社,2010.
  • 4Miller M.云计算[M].北京:机械工业出版社,2009.
  • 5英特尔开源软件技术中心,复旦大学并行处理研究所.系统虚拟化:原理与实现[M].北京:清华大学出版社,2009.
  • 6IBM商业价值研究所.智慧地球[M].北京:东方出版社,2009.
  • 7Dean J, Ghemawat S. MapReduce: Simplified Data Processing on Large Clusters[J]. 2004.
  • 8Ghemawat S, Gobioff H, Leung S-T. The Google File System [J]. 2003.
  • 9Dean J, Ghemawat S. MapReduce: Simplified Data Processing on Large Clusters [C]//OSDI' 04.. Sixth Symposium on Operating System Design and Implementation. San Francisco, CA, December 2004.
  • 10Ghemawat S, Gobioff H, Leung S-T. The Google File System [C]//19th ACM Symposium on Operating Systems Principles. Lake George, NY, October 2003.

共引文献300

同被引文献145

引证文献30

二级引证文献65

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部