我试图通过从控制台输入pyspark在我的浏览器中启动PySpark笔记本,但是我收到以下错误:
c:\Spark\bin>pyspark
python: can't open file 'notebook': [Errno 2] No such file or directory
我在这做错了什么?
请帮忙?
听起来像jupyter笔记本没有安装或没有在您的路径中。
我更喜欢使用Anaconda进行python发布,Jupyter是标准配置,并且还会安装所有必要的路径信息。
在那之后,只要你正确设置PYSPARK_PYTHON_DRIVER=jupyter
和PYSPARK_PYTHON_DRIVER_OPTS='notebook'
就可以了。
您想在调用命令pyspark
时启动jupyter笔记本。因此,您需要将以下内容添加到bash_profile
或zshrc_profile
。
export PYSPARK_SUBMIT_ARGS="pyspark-shell"
export PYSPARK_DRIVER_PYTHON=ipython
export PYSPARK_DRIVER_PYTHON_OPTS="notebook" pyspark