Yarn 使用 Cgroup 实现任务资源限制

Yarn 使用 Cgroup 实现任务资源限制

摘要

Linux CGroup 全称是 Linux Control Group，是 Linux 内核提供的一个用来限制进程资源使用的功能，支持如 CPU, 内存，磁盘 IO 等资源的使用限制。用户可以使用 CGroup 对单个进程或者一组进程进行精细化的资源限制，具体使用方式可以查看参考文档。目前， Yarn NodeManager 能够使用 CGroup 来限制所有 containers 的资源使用，