首页 > 其他 > 详细

sqoop运行时提示内存不足的解决办法

时间:2020-02-24 17:29:48      阅读:530      评论:0      收藏:0      [点我收藏+]

得知mapreduce的运行内存不足,主要为这一段
Diagnostics: Container [pid=13688,containerID=container_e07_1533215502568_0002_02_000001] is running beyond physical memory limits. Current usage: 180.2 MB of 170 MB physical memory used; 1.9 GB of 357.0 MB virtual memory used. Killing container.

在yarn.site 中设置 yarn.scheduler.minimum-allocation-mb 的值为256MB问题解决

yarn.scheduler.minimum-allocation-mb
256

如果提示虚拟内存不足,可以关闭检查,如下设置

yarn.nodemanager.vmem-check-enabled
false
Whether virtual memory limits will be enforced for containers.

sqoop运行时提示内存不足的解决办法

原文:https://www.cnblogs.com/hupingzhi/p/12357541.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!