Код: Выделить всё
ModuleNotFoundError: No module named 'pyspark'
Я добавил следующие строки в свой .bashrc:
Код: Выделить всё
export SPARK_HOME=~/Spark/spark-3.0.1-bin-hadoop2.7
export PATH=$PATH:$SPARK_HOME/bin
export PYTHONPATH=$SPARK_HOME/python/:$PYTHONPATH
export PYTHONPATH=$SPARK_HOME/python/lib/py4j-0.10.9-src.zip:$PYTHONPATH
export PYSPARK_PYTHON=python3
Код: Выделить всё
____ __
/ __/__ ___ _____/ /__
_\ \/ _ \/ _ `/ __/ '_/
/__ / .__/\_,_/_/ /_/\_\ version 3.0.1
/_/
Using Python version 3.7.3 (default, Jul 25 2020 13:03:44)
SparkSession available as 'spark'.
Затем я набрал:
Код: Выделить всё
import findspark
print(findspark.init())
ValueError: Не удалось найти Spark, убедитесь, что установлен env SPARK_HOME или Spark находится в ожидаемом месте (например, после установки homebrew)
Подробнее здесь: https://stackoverflow.com/questions/641 ... ed-pyspark
Мобильная версия