码迷,mamicode.com
首页 > 其他好文 > 详细

ModuleNotFoundError: No module named 'pyspark' 解决方案

时间:2020-05-15 09:58:55      阅读:408      评论:0      收藏:0      [点我收藏+]

标签:使用   window   自带   win   under   安装   linux   第三方   问题   

出现问题的原因是在执行python xxx.py 时系统找不到相关资源

Windows中:

由于我的Windows中没有装Spark,所以直接安装了Python的第三方包,pycharm中直接引用就行了

pip install pyspark

Linux中:

我的是Ubuntu18.04,自己在里面装了spark。

python是系统自带的,由于pyspark不在python的环境变量下,将资源的目录配置到python的环境变量下即可

export PYTHONPATH=${SPARK_HOME}/python:${SPARK_HOME}/python/pyspark.zip:${SPARK_HOME}/python/lib/py4j-0.10.8.1-src.zip:$PYTHONPATH

另外,还可以使用spark-sbumit xxx.py代替python xxx.py执行

ModuleNotFoundError: No module named 'pyspark' 解决方案

标签:使用   window   自带   win   under   安装   linux   第三方   问题   

原文地址:https://www.cnblogs.com/rhgaiymm/p/12892710.html

(1)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!