首页 > 其他 > 详细

YARN调度

时间:2016-03-04 16:04:07      阅读:146      评论:0      收藏:0      [点我收藏+]
  1. 理想的世界,一个YARN应用请求将会立刻得到授予。而现实世界,资源是受限制的,在一个忙碌的集群中,一个应用经常需要等待他请求的资源。YARN调度负责这个事情,分配资源给应用通过一些方式定义。调度是一个困难的问题也没有所谓最好的方法。
  2. YARN有三种调度,FIFO,Capacity,Fair Schedulers。FIFO比较好理解,基本就是将请求放在一个队列中,当一个请求满足后,处理第二个请求。但是集群中不太适合使用这个方法,如果一个大的应用使用了很多资源,其他的应用都得等待它的完成。
  3. Capacity则是分成几个特有的队列,Fair方式,则是当小任务来的时候,大的任务分出一些资源先给小任务。

YARN调度

原文:http://www.cnblogs.com/dalu610/p/5242287.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!