关于运行hadoop任务的第三方jar如何加入classPath

标签：hadoop job依赖的jar

    之前在跑一个任务的时候，那个任务需要使用第三方的jar，关于这个jar可以再打包的时候嵌入到包中也可以查看hadoop-env.sh脚本里面有加载classpath的脚本语句：

for f in $HADOOP_HOME/contrib/capacity-scheduler/*.jar; do
  if [ "$HADOOP_CLASSPATH" ]; then
    export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$f
  else
    export HADOOP_CLASSPATH=$f
  fi
done

故可以将第三方jar放在该目录下：contrib/capacity-scheduler

本文出自 “陈砚羲” 博客，请务必保留此出处http://chenyanxi.blog.51cto.com/4599355/1558166

关于运行hadoop任务的第三方jar如何加入classPath

标签：hadoop job依赖的jar

原文地址：http://chenyanxi.blog.51cto.com/4599355/1558166