擅长:python、mysql、java
<p>对于那些可能遇到这个的人,我想出来了!</p>
<p>我特别选择使用一个旧版本的Spark来跟随我正在观看的教程-<em>Spark 2.1.0</em>。我不知道Python的最新版本(在编写本文时是3.5.6)与Spark 2.1不兼容。因此PySpark不会发射。</p>
<p>我通过使用<em>Python 2.7</em>并在.bashrc中相应地设置路径来解决这个问题</p>
<pre><code>export PYTHONPATH=$PYTHONPAH:/usr/lib/python2.7
export PYSPARK_PYTHON=python2.7
</code></pre>