随着 MapReduce 的流行,其开源实现 Hadoop 也变得越来越受推崇.在 Hadoop 系统中,有一个组件非常重要,那就是调度器.调度器是一个可插拔的模块,用户可以根据自己的实际应用要求设计调度器 1.调度器基本作用 Hadoop调度器的基本作用就是根据节点资源(slot)使用情况和作业的要求,将任务调度到各个节点上执行 2.调度器考虑的因素 1.作业优先级.作业的优先级越高,它能够获取的资源(slot数目)也越多.Hadoop 提供了5种作业优先级,分别为 VERY_HIGH.HIG…