码迷,mamicode.com
首页 >  
搜索关键字:hadoop-lzo    ( 5个结果
configure: error: no acceptable C compiler found in $PATH
Centos7(64位)下安装hadoop-lzo2.10执行./configure时报错:configure:error:noacceptableCcompilerfoundin$PATH***********************************************************查看得知未安装合适的编译器。sudoyuminstallgcc-c++(使用sudoyuminstallgcc-c++时会自动安装/升..
分类:其他好文   时间:2017-07-18 16:42:12    阅读次数:226
hadoop输出lzo文件并添加索引
如果已经有了lzo文件,可以采用如下方法添加索引: bin/yarn jar /module/cloudera/parcels/GPLEXTRAS-5.4.0-1.cdh5.4.0.p0.27/lib/hadoop/lib/hadoop-lzo-0.4.15-cdh5.4.0.jar com.had ...
分类:其他好文   时间:2016-08-15 17:11:16    阅读次数:235
修改hadoop脚本改变CLASSPATH中jar加载顺序
先说一下环境,有两个集群,一个新的一个旧的,打算把新的调试好然后把旧的关掉。新:ClouderaExpress5.6.0,CDH-5.6.0旧:ClouderaExpress5.0.5,CDH-5.0.5新集群搭建过程中发现一个问题,执行以下命令对lzo文件创建索引,在新集群中job无法提交到指定队列,同样的命令在旧集群..
分类:编程语言   时间:2016-04-19 00:48:33    阅读次数:174
spark-1.0.2配置lzo
export SPARK_LIBRARY_PATH=$SPARK_LIBRARY_PATH:/soft/hadoop/lzo/lib/export SPARK_CLASSPATH=$SPARK_CLASSPATH:/soft/server/spark-1.0.2-bin-hadoop2/lib/ha...
分类:其他好文   时间:2015-03-30 10:47:38    阅读次数:201
maven 把本地的jar打入到发布包中
很多人用mvn来管理发布包,但是有些jar包并没有发布到公网上,也就是平时我们说的本地的jar包,这下可愁坏了我们了。该怎么办呢? 其实很简单,把这个jar包添加到自己本地的maven库里, 举个例子,我们本地有个jar包叫,hadoop-lzo-0.4.2.0-SNAPSHOT.jar , 想把这个jar打入到自己的发布包中。 可以先执行如下语句 mvn install:install-...
分类:编程语言   时间:2015-02-14 12:24:11    阅读次数:392
5条  
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!