码迷,mamicode.com
首页 > 其他好文 > 详细

hive启动报错(整合spark)

时间:2019-10-03 23:44:17      阅读:162      评论:0      收藏:0      [点我收藏+]

标签:export   park   修改   server   tor   整合   port   cto   目录   

spark整合hive后,hive启动报错:

ls: cannot access /export/servers/spark/lib/spark-assembly-*.jar: No such file or directory

原因:spark版本升级到2.x以后,原有lib目录下的大JAR包被分散成多个小JAR包,原来的spark-assembly-*.jar已经不存在,所以hive没有办法找到这个JAR包。

解决方法:打开hive下面的bin目录,找到hive文件,编辑hive文件,找到如下一行:

 sparkAssemblyPath=`ls ${SPARK_HOME}/lib/spark-assembly-*.jar`

修改为如下一行:

 sparkAssemblyPath=`ls ${SPARK_HOME}/jars/*.jar`

hive启动报错(整合spark)

标签:export   park   修改   server   tor   整合   port   cto   目录   

原文地址:https://www.cnblogs.com/mediocreWorld/p/11621090.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!