首页 > 其他 > 详细

hive

时间:2019-04-27 23:51:08      阅读:130      评论:0      收藏:0      [点我收藏+]

hive进行mapreduce卡壳解决方法

在google搜索得出的解决方案是在执行的hive语句前添加以下几条参数值设定语句:

set mapreduce.job.reduces=512;
set hive.groupby.skewindata=true;
set hive.optimize.skewjoin=true;
set hive.skewjoin.key=5000;
set hive.groupby.mapaggr.checkinterval=5000;

hive

原文:https://www.cnblogs.com/linuxws/p/10780966.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!