首页 > 其他 > 详细

hadoop配置项笔记 - streaming

时间:2019-03-01 13:29:50      阅读:295      评论:0      收藏:0      [点我收藏+]

stream.map.input.ignoreKey

作用:是否忽略key,只传递值。

默认值:false

我的设置:按需要更改

 

stream.map.input.field.separator

stream.reduce.input.field.separator

作用:分割输入键值的分隔符

默认值:\t

我的设置:按需要更改

 

stream.map.output.field.separator

stream.reduce.output.field.separator

作用:分隔输出键值的分隔符

默认值:\t

我的设置:按需要更改

 

stream.num.map.output.key.fields

stream.num.reduce.output.key.fields

作用:由输出分隔符分隔的分段数,分隔结果左侧作为map或reduce的输出键。

默认值:1

我的设置:按需要更改

hadoop配置项笔记 - streaming

原文:https://www.cnblogs.com/PigeonNoir/p/10455864.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!