098实战 Job的调度

一:介绍

1.job调度

  容量调度:Apache Hadoop的默认方式

  公平调度:CDH版本的Hadoop的默认方式

2.公平调度

  是一种资源分配方式,在yarn的整个生命周期中,所有的application平均分配资源。当一个应用在运行的时候,首先获取所有的资源,当其他应用提交之后,会重新分配资源。调度器Scheduler将application以queues方式组织,这些queue之间公平共享资源。队列中job使用的策略有FIFO,FAIR(默认),DRF(自定义)。

  fairscheduler提供了一个参数,运行时给定用户或者机器允许提交的最多应用。

  支持多层的queues,所有的queues必须继承“root”,application只允许运行在叶子上。

  

3.配置

  

原文地址:https://www.cnblogs.com/juncaoit/p/6343632.html