首页 > 其他 > 详细

七、Hadoop学习笔记————调优之Hadoop参数调优

时间:2017-11-01 16:12:48      阅读:258      评论:0      收藏:0      [点我收藏+]

技术分享

dfs.datanode.handler.count默认为3,大集群可以调整为10

 技术分享

技术分享

传统MapReduce和yarn对比

 技术分享

如果服务器物理内存128G,则容器内存建议为100比较合理

技术分享

配置总量时考虑系统调优块,双路四核2*4*2=16g,则总量设置为10到12比较合适,需要预留空间给其他服务器

技术分享

技术分享

技术分享

需要给master分配足够资源,并且分配受限于yarn

技术分享

技术分享

hadoop调优需要不断尝试,没有固定的套路

七、Hadoop学习笔记————调优之Hadoop参数调优

原文:http://www.cnblogs.com/liuxiaopang/p/7766903.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!