cl_303303303 发表于 2018-10-30 13:29:28

关于运行hadoop任务的第三方jar如何加入classPath

  之前在跑一个任务的时候,那个任务需要使用第三方的jar,关于这个jar可以再打包的时候嵌入到包中也可以查看hadoop-env.sh脚本里面有加载classpath的脚本语句:
  for f in $HADOOP_HOME/contrib/capacity-scheduler/*.jar; do
  if [ "$HADOOP_CLASSPATH" ]; then
  export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$f
  else
  export HADOOP_CLASSPATH=$f
  fi
  done
  故可以将第三方jar放在该目录下:contrib/capacity-scheduler

页: [1]
查看完整版本: 关于运行hadoop任务的第三方jar如何加入classPath