Hadoop的深入探究
摘要
本文对Hadoop的架构设计进行了深入的研究,分别分析了它的两个核心功能组件HDFS和Map Reduce的系统架构、实现原理和特点。
出处
《电子世界》
2017年第5期27-27,共1页
Electronics World
二级参考文献10
-
1Vaquero L M, Rodero-Merino L, Caceres J, et al. A Break in the Clouds: Towards a Cloud DefinitionD]. ACM SIGCOMM Computer Communication Review, 2009, 39 ( 1 ) : 50- 55.
-
2Bryant R E. Data-Intensive Supercomputing: the Case for DISC[R]. CMU Technical Report CMU-CS-07-128, Department of Computer Science, Carnegie Mellon University, 2007.
-
3Dean J, Ghemawat S. MapReduce: Simplied Data Processing on Large Clusters[C]//Proc of OSDI '04,2004 : 137-150.
-
4Colbyranger, Raghuraman R, Penmetsa A. Evaluating MapReduce for Multi-Core and Multiprocessor Systems[C]//Proc of the IEEE 13th Int'l Syrup on High Performance Computer Architecture, 2007 : 13-24.
-
5Kruijf M D, Sankaralingam K. MapReduce for the Cell B. E. Architecture[-R]. Technical Report CS-TR-2007-1625, University of Wisconsin Computer Sciences University of Wisconsin, 2007.
-
6He B S, Fang W B, Luo Q, et al. Mars: A MapReduce Framework on Graphics Processors[C]//Proc of the 17th Int'l Conf on Parallel Architectures and Compilation Techniques, 2008 : 260-269.
-
7Apache Hadoop. Hadoop [EB/OL]. [2009-03-06]. http://hadoop, apache, org/.
-
8Yahoo. Yahoo! Hadoop Tutorial [EB/OL]. [2009-02-27]. http:// public, yahoo, com/gogate/hadoop-tutorial/start-tutorial, html.
-
9Ghemawat S, Gogioff H, Leung P T. The Google File System[C]//Proc of the 19th ACM Syrnp on Operating Systems Principles, 2003 : 29-43.
-
10Zaharia M, Konwinski A, Joseph A D. Improving MapReduce Performance in Heterogeneous Environments [C]//Proc of the 8th Usenix Syrup on Operating Systems Design and Implementation, 2008 : 29-42.
共引文献20
-
1顾宇,周良,丁秋林.基于优先级的Three-Queue调度算法研究[J].计算机科学,2011,38(B10):253-256. 被引量:4
-
2李丽英,唐卓,李仁发.基于LATE的Hadoop数据局部性改进调度算法[J].计算机科学,2011,38(11):67-70. 被引量:17
-
3李鑫,张鹏.Hadoop集群公平调度算法的改进与实现[J].电脑知识与技术,2012,8(1):166-168. 被引量:6
-
4邹世军,赵红武.基于Hadoop集群的加权循环算法的研究[J].工业控制计算机,2012,25(10):65-66.
-
5杨立身,余丽萍.异构环境下增强的自适应MapReduce调度算法[J].计算机工程与应用,2013,49(19):39-43. 被引量:5
-
6陈吉荣,乐嘉锦.基于Hadoop生态系统的大数据解决方案综述[J].计算机工程与科学,2013,35(10):25-35. 被引量:116
-
7何翔,李仁发,唐卓.一种异构环境下的基于MapReduce任务调度改进机制[J].计算机应用研究,2013,30(11):3370-3373. 被引量:8
-
8李锋刚,魏炎炎,杨龙.基于和声算法异构Hadoop集群资源分配优化[J].计算机工程与应用,2014,50(9):98-102. 被引量:5
-
9李燕歌,张治斌,王娜.基于负载均衡的MapReduce后备任务上限自适应算法[J].计算机应用研究,2015,32(1):67-70. 被引量:3
-
10杨倩茹,黄梦醒,万兵.一种引入内存平衡的Hadoop平台作业调度算法[J].小型微型计算机系统,2014,35(12):2708-2712. 被引量:4
-
1庾志成.论多媒体通信[J].现代电信科技,2006(11):1-1. 被引量:1
-
2赵光磊.阿尔卡特朗讯加大数据中心布局 重点拓展中国市场[J].通信世界,2012(15):31-31.
-
3许翠苹.从互联网大会管窥运营商移动互联方略[J].通讯世界,2013(8):3-3.
-
4胡莹莹,谭光林.基于Hadoop的聚类算法在无线电监测数据分析中的应用[J].数字通信世界,2015(5):32-34. 被引量:2
-
5张乐剑,廖建新,陈俊亮.预付费业务中呼叫前转功能的实现[J].电信网技术,2004(3):23-26.
-
6陕西省政府携手中兴 打造“双核”电子政务网[J].通讯世界,2007(7):82-83.
-
7刘润东.云计算平台下的语音信号处理[J].现代电子技术,2016,39(2):15-17. 被引量:1
-
8张冰涛,袁平.GSM无线网络优化的关键问题[J].中国电子商情(通信市场),2003(10):22-23. 被引量:2
-
9张雪丽.应急通信技术体系及标准化问题探讨[J].现代电信科技,2009,39(2):25-28. 被引量:9
-
10张圆圆.基于双核心架构的全台网互联体系设计[J].电视技术,2014,38(24):73-74. 被引量:1