首页 > 其他 > 详细

yarn参数调节

时间:2021-05-31 21:58:14      阅读:30      评论:0      收藏:0      [点我收藏+]

单个容器(container)可申请的最小与最大内存,应用在运行申请内存时不能超过最大值,小于最小值则分配最小值

yarn.scheduler.minimum-allocation-mb 
yarn.scheduler.maximum-allocation-mb

单个任务可申请的最小/最大虚拟CPU个数(运行MapRedce作业时,每个Task最少可申请虚拟CPU个数,最多可申请的虚拟CPU个数)

yarn.scheduler.minimum-allocation-vcores 
yarn.scheduler.maximum-allocation-vcores

每个节点可用的最大内存,此数值可以用于计算container最大数目

yarn.nodemanager.resource.memory-mb

NodeManager总的可用虚拟CPU个数

yarn.nodemanager.resource.cpu-vcores

yarn参数调节

原文:https://www.cnblogs.com/zyanrong/p/14831960.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!