Hadoop2启用cgroup

时间：2014-03-20 00:48:02 阅读：745 评论：0 收藏：0 [点我收藏+]

NodeManager启用cgroup资源隔离（Hadoop2.3）

1、准备container-executor.cfg文件

$ cat ${HADOOP_HOME}/etc/hadoop/container-executor.cfg
yarn.nodemanager.linux-container-executor.group=users 注意：‘users‘来自$ groups 返回的第一个组
从根目录到container-executor.cfg的user全部设为root

2、设置container-executor权限

$ sudo chown root bin/container-executor
$ sudo chmod 6050 bin/container-executor

3、准备cgroup目录

$ sudo mkdir -p /cgroup/cpu

4、yarn-site.xml新增配置：

<property>
    <name>yarn.nodemanager.linux-container-executor.resources-handler.class</name>
    <value>org.apache.hadoop.yarn.server.nodemanager.util.CgroupsLCEResourcesHandler</value>
  </property>
  <property>
    <name>yarn.nodemanager.linux-container-executor.cgroups.mount</name>
    <value>true</value>
  </property>
  <property>
    <name>yarn.nodemanager.container-executor.class</name>
    <value>org.apache.hadoop.yarn.server.nodemanager.LinuxContainerExecutor</value>
  </property>
  <property>
    <name>yarn.nodemanager.linux-container-executor.cgroups.mount-path</name>
    <value>/cgroup</value>
  </property>

  <property>

    <name>yarn.nodemanager.linux-container-executor.nonsecure-mode.local-user</name>

    <value>username</value> # 这里username可以是运行NodeManager的用户

  </property>

Hadoop2启用cgroup,布布扣,bubuko.com

Hadoop2启用cgroup

原文：http://blog.csdn.net/liangliyin/article/details/21552943

踩

(0)

评论一句话评论（0）

分享档案

更多>

2021年09月23日 (328)
2021年09月24日 (313)
2021年09月17日 (191)
2021年09月15日 (369)
2021年09月16日 (411)
2021年09月13日 (439)
2021年09月11日 (398)
2021年09月12日 (393)
2021年09月10日 (160)
2021年09月08日 (222)