错误:搜索时找不到有效的SPARK_HOME :(在Windows中为Pycharm)

问题描述 投票:2回答:1

我是PYCHARM的新手。当我尝试执行简单的代码时,我已经正确配置了所有内容但仍面临下面的问题 Could not find valid SPARK_HOME while searching:

在项目口译员中,我更新了PYTHON,PY4J.zip,PYSPARK.zip和SPARK的路径,直到bin(不包括bin)

版本如下:

Python version - 3.6.4
Spark - 2.2.1

我需要配置什么吗?

apache-spark pyspark pycharm
1个回答
1
投票

我不确定你是如何配置的。因此,您可以使用以下代码进行配置。

在这里,我已经为HADOOP_HOME使用了winutils路径,如果你正在使用Hadoop,请提及正确的hadoop_home路径。

import sys
import os
os.environ['SPARK_HOME'] = "C:/Users/LZ/Spark"
os.environ['HADOOP_HOME'] = "C:/Users/LZ/winutils"
sys.path.append("C:/Users/LZ/Spark/python")
sys.path.append("C:/Users/LZ/Spark/python/lib")

实现上述代码后,您可以在PYCHARM中运行代码。希望这可以帮助

© www.soinside.com 2019 - 2024. All rights reserved.