数据中心的Yarn on Docker集群方案
当前数据中心存在的问题
数据中心中的应用一般独立部署,为了保证环境隔离与方便管理,保证应用最大资源 数据中心中普遍存在如下问题:
- 主机资源利用率低
- 部署和扩展复杂
- 资源隔离无法动态调整
- 无法快速响应业务
方案选型
Yarn on Docker有哪些特点?
彻底隔离队列
- 为了合理利用Hadoop yarn的资源,队列间会互相抢占计算资源,造成重要任务阻塞
- 根据部门申请的机器数量划分Yarn集群方便财务管理
- 更细粒度的资源分配
来源: http://www.infoq.com/cn/articles/YarnOnDocker-forDCCluster