MapReduce是hadoop提供一个可进行分布式计算的框架或者平台，显然这个平台是多用户的，每个合法的用户可以向这个平台提交作业，那么这就带来一个问题，就是作业调度。

任何调度策略都考虑自己平台调度需要权衡的几个维度，例如操作系统中的进程调度，他需要考虑的维度就是资源（CPU）的最大利用率（吞吐）和实时性，操作系统对实时性的要求很高，所以操作系统往往采用基于优先级的、可抢占式的调度策略，并且赋予IO密集型（相对于计算密集型）的进程较高的优先级，扯的有点远。

回到hadoop平台，其实MapReduce的作业调度并没有很高的实时性的要求，本着最大吞吐的原则去设计的，所以MapReduce默认采用的调度策略是FIFO（基于优先级队列实现的FIFO，不是纯粹的FIFO，这样每次h），这种策略显然不是可抢占式的调度，所以带来的问题就是高优先级的任务会被先前已经在运行并且还要运行很久的低优先级的作业给堵塞住。

别的选择：Fair Scheduler 和 Capacity Scheduler

未完待续～

最新文章

1. CSS系列：CSS中盒子之间的关系
2. 为开发者准备的 Android 函数库（2016 年版）
3. WebApi接口传参不再困惑（4）：传参详解(转载)
4. PoEdu- C++阶段班【Po学校】-Lesson03_构造函数精讲 - 第5天
5. ES6块级作用域及新变量声明（let）
6. POJ 2570(floyd)
7. 关键字const
8. 【转】PS学堂之一：展示一下自己做的圆形印章
9. angularjs使用directive实现分页组件
10. css基本属性
11. beanutils设置参数和获取参数
12. 数据库4m10d作业
13. shell中的crontab定时任务
14. 不可思议的纯 CSS 实现鼠标跟随效果
15. Flask的session使用
16. 我在MySQL免安装版使用过程中遇到的问题记录【二】
17. 有关于并发中的死锁(Deadlock)、饥饿(Starvation)、活锁(Livelock)
18. python基础一 ------装饰器的作用
19. Android6.0权限大全和权限分类
20. Benthos metrcis 说明

热门文章

1. lighttpd mod_status模块
2. virt viewer Usbredir USB重定向
3. Java设计模式系列之中介者模式
4. 问题-XE8报Object factory for class{xx-xx-xx-xx-xx} is missing. To register it, you can drop component[TFDGUIxWaitCursor] into your project.
5. MVC神韵---你想在哪解脱！（十三）
6. INV（库存管理）
7. java的BigDecimal
8. android ipc通信机制之之三，进程通讯方式。
9. Weka – 分类
10. iOS GCD 与 NSOperationQueue