我是PYCHARM的新手。当我尝试执行简单的代码时,我已经正确配置了所有内容但仍面临下面的问题
Could not find valid SPARK_HOME while searching:
在项目口译员中,我更新了PYTHON,PY4J.zip,PYSPARK.zip和SPARK的路径,直到bin(不包括bin)
版本如下:
Python version - 3.6.4
Spark - 2.2.1
我需要配置什么吗?
我不确定你是如何配置的。因此,您可以使用以下代码进行配置。
在这里,我已经为HADOOP_HOME使用了winutils路径,如果你正在使用Hadoop,请提及正确的hadoop_home路径。
import sys
import os
os.environ['SPARK_HOME'] = "C:/Users/LZ/Spark"
os.environ['HADOOP_HOME'] = "C:/Users/LZ/winutils"
sys.path.append("C:/Users/LZ/Spark/python")
sys.path.append("C:/Users/LZ/Spark/python/lib")
实现上述代码后,您可以在PYCHARM中运行代码。希望这可以帮助