码迷,mamicode.com
首页 > Web开发 > 详细

关于flume hdfs sink lzo 压缩格式的问题

时间:2015-12-03 15:44:41      阅读:839      评论:0      收藏:0      [点我收藏+]

标签:flume hdfs sink lzo 格式压缩

问题描述: 

    采用flume 上传 到HDFS 通过原生的sink 一直会报如下错误:


flume 支持lzo 压缩前提条件: 

    1、 flume机器节点上 安装有 lzo 库   hadoop 库  。

    2、 flume 启动的时候配置过 hadoop  环境变量  。 

    3、 hadoop 配置 支持lzo 格式压缩 。


解决问题: 

    

本文出自 “大数据学习之” 博客,请务必保留此出处http://shongx.blog.51cto.com/6267950/1719201

关于flume hdfs sink lzo 压缩格式的问题

标签:flume hdfs sink lzo 格式压缩

原文地址:http://shongx.blog.51cto.com/6267950/1719201

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!