期刊文献+

Reduce动态调度算法的研究

下载PDF
导出
摘要 MapReduce任务调度算法是MapReduce系统的性能核心部分。本文通过研究MapReduce调度算法de工作原理,提出了基于Reduce调度时间策略的动态调度算法,通过实验比较和验证,发现动态调度算法的性能和正确性均取得了一定的成效。
作者 唐一韬
出处 《石油石化物资采购》 2019年第13期114-114,共1页 Petroleum & Petrochemical Material Procurement
基金 湖南省教育厅科研项目14C0064《基于hadoop平台任务调度算法的优化设计研究》。
  • 相关文献

参考文献3

二级参考文献24

  • 1邓华锋,刘云生,肖迎元.分布式数据流处理系统的动态负载平衡技术[J].计算机科学,2007,34(7):120-123. 被引量:13
  • 2孙广中,肖锋,熊曦.MapReduce模型的调度及容错机制研究[J].微电子学与计算机,2007,24(9):178-180. 被引量:26
  • 3Alexandros L. Update Propagation Strategies for Improving the Quality of Data on the Web[C]//Proceedings of the 27th International Conference on Very Large Data Bases. [S. l.]: ACM Press, 2001: 391-400.
  • 4Wbite T. Hadoop权威指南[M]. 曾大聃, 周傲英, 译. 北京: 清华大学出版社, 2010.
  • 5Torabzadeh E. Cloud Theory-based Simulated Annealing Approach for Scheduling in the Two-stage Assembly Flowshop[J]. Advances in Engineering Software, 2010, 41(10): 1243-1258.
  • 6Allahverdi A, Al-Anzi F S. The Two-stage Assembly Scheduling Problem to Minimize Total Completion Time with Setup Times[J]. Computers & Operations Research, 2009, 36(10): 2740-2747.
  • 7Jiang Dawei, Ooi Bengchin, Shi Lei, et al.The Performance of MapReduce: an in-depth study[C]//Proceedings of the International Conference on Very Large Data Bases,2010: 472-483.
  • 8Dean J, Ghemawat S.Map reduce: a flexible data processing tool[J].ACM Transactions on Accessible Computing,2010,53 (1):72-77.
  • 9Riedel E, Faloutsos C, Gibson G A.Active disks for large scale data processing[J].IEEE Computer,2001,34:68-74.
  • 10Zaharia M, Konwinski A, Joseph A D.Improving MapReduce performance in heterogeneous environments[C]//Proceedings of the 8th Conference on Operating Systems Design and Implementation, 2008 : 29-42.

共引文献26

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部