Spark安装出错问题
1.环境
1.centos 7.0版本
2.jdk 1.8
3.hadoop 2.9.3
4.spark 2.4.3 spark-2.4.3-bin-without-hadoop.tgz
2.出现的问题
1.Spark-shell终端出错
报错 Exception in thread "main" java.lang.NoSuchMethodError: jline.console.completer.CandidateListCompletionHandler.setPrintSpaceAfterFullCompletion(Z)V
解决方案:
① 报错原因为 $SPARK_HOME/jars 路径下缺少:
jline-2.14.6.jar
② 以及环境变量缺少:
export TERM=xterm-color
2)解决方案:
① 在错误1中使用的jars文件夹里面寻找 jline-2.14.6.jar ,找到这个文件,通过7-zip打包成 .tar.gz 格式,然后上传到服务器,再解压到$SPARK_HOME/jars路径下
错误如下图:
2. Spark-sql终端启动出错:
Failed to load org.apache.spark.sql.hive.thriftserver.SparkSQLCLIDriver.
去官网下载没有without的安装包
如: spark-2.4.3-bin-hadoop2.7.tgz
具体错误如下:
~~~ ![在这里插入图片描述](https://img-blog.csdnimg.cn/e4f9ae3df1be46f2ad6b898cc01bbc3c.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA6bmP6aOe5Lmd5LiH6YeM7pGH,size_20,color_FFFFFF,t_70,g_se,x_16#pic_center)
免责声明:本站所有文章内容,图片,视频等均是来源于用户投稿和互联网及文摘转载整编而成,不代表本站观点,不承担相关法律责任。其著作权各归其原作者或其出版社所有。如发现本站有涉嫌抄袭侵权/违法违规的内容,侵犯到您的权益,请在线联系站长,一经查实,本站将立刻删除。 本文来自网络,若有侵权,请联系删除,如若转载,请注明出处:https://yundeesoft.com/4846.html