期刊文献+

主资源公平调度算法在YARN中应用研究 被引量:1

下载PDF
导出
摘要 Apache Hadoop YARN是一种新的通用的Hadoop资源管理器,是在Mapreduce1的基础上发展起来的,该引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。为此,文章在分析了Hadoop YARN计算框架的基本结构和工作流程,重点研究了Hadoop YARN中的多资源分配机制,尤其是主资源公平调度算法(Dominant Resource Fairness,DRF)在YARN中的应用。
作者 陈昕 刘朝晖
出处 《电脑知识与技术》 2016年第2Z期173-175,共3页 Computer Knowledge and Technology
  • 相关文献

参考文献1

二级参考文献13

  • 1Ghemawat S,Gobioff H,Leung S T.The Google file system[C]//The Nineteenth ACM Symposium on Operating Systems Principles,2003.
  • 2Jeffrey Dean,Sanjay Ghemawat.Map Reduce:simplified dataprocessing on large clusters[J].Communications of the ACM-50th anniversary issue:1958-2008,2008,1(51):107-113.
  • 3Fay Chang,Jeffrey Dean,Sanjay Ghemawat,et al.Bigtable:A Distributed Storage System for Structured Data[EB/OL].[2015-01-07].http://labs.google.com/papers/bigtable.html.
  • 4Apache hadoop[EB/OL].[2015-01-07].http://hadoop.apache.org.
  • 5Apachetez[EB/OL].[2015-01-07].http://incubator.apache.org/projects/tez.html.
  • 6Vinod Kumar Vavilapalli,Arun C Murthy,Chris Douglas,et al.Apache Hadoop YARN:Yet Another Resource Negotiator[C]//The Fourth ACM Symposium on Cloud Computing(So CC'13),2013.
  • 7SACC 2014:腾讯资源调度平台Gaia分享[EB/OL].[2015-01-07].http://cloud.it 168.com/a2014/0918/1667/000001667383.shtml.
  • 8Hadoop Capacity Scheduler[EB/OL].[2015-01-07].http://hadoop.apache.org/common/docs/r2.2.0/capacity_scheduler.html.
  • 9Hadoop Fair Scheduler[EB/OL].[2015-01-07].http://hadoop.apache.org/common/docs/r2.2.0/fair_scheduler.html.
  • 10Malte Schwarzkopfy,Andy Konwinskiz,Michael AbdEl-Malekx.Omega flexible,scalable schedulers for large compute clusters[C]//ACM SIGOPS European Conference on Computer Systems(Euro Sys 2013).

共引文献24

同被引文献7

引证文献1

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部