终端中的Pyspark命令启动Jupyter noteb

Question

我遇到了一个spark提交问题，抛出的错误不是Jupyter命令，即pyspark启动的是webui而不是pysparkshell

背景信息：

1. 在MAC上使用brew安装Scala、Spark
2. 已安装Conda Python 3.5
3. Spark命令在Jupyter笔记本上运行
4. 终端上的“pyspark”启动笔记本电脑而不是shell

任何帮助都是非常感谢的。在

Answer 1

PYSPARK_DRIVER_PYTHON变量被设置为自动启动ipython/jupyter（可能与预期一样）。在

如果希望将其作为默认值，则可能需要修改配置文件脚本。在