首页 > Web开发 > 详细

关于flume hdfs sink lzo 压缩格式的问题

时间:2015-12-03 15:42:45      阅读:424      评论:0      收藏:0      [点我收藏+]

问题描述: 

    采用flume 上传 到HDFS 通过原生的sink 一直会报如下错误:


flume 支持lzo 压缩前提条件: 

    1、 flume机器节点上 安装有 lzo 库   hadoop 库  。

    2、 flume 启动的时候配置过 hadoop  环境变量  。 

    3、 hadoop 配置 支持lzo 格式压缩 。


解决问题: 

    

本文出自 “大数据学习之” 博客,请务必保留此出处http://shongx.blog.51cto.com/6267950/1719201

关于flume hdfs sink lzo 压缩格式的问题

原文:http://shongx.blog.51cto.com/6267950/1719201

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!