无法识别Pyspark命令
回答此问题可获得 20 贡献值，回答如果被采纳可获得 50 分。
<p>我已经安装了anaconda，也下载了Spark 1.6.2。我使用这个答案中的以下说明来配置Jupyter<a href="https://stackoverflow.com/questions/33064031/link-spark-with-ipython-notebook">enter link description here</a>的spark</p>
<p>我下载并解压缩了spark目录</p>
<pre><code>~/spark
</code></pre>
<p>现在，当我cd到这个目录和bin中时，我看到以下内容</p>
<pre><code>SFOM00618927A:spark $ cd bin
SFOM00618927A:bin $ ls
beeline pyspark run-example.cmd spark-class2.cmd spark-sql sparkR
beeline.cmd pyspark.cmd run-example2.cmd spark-shell spark-submit sparkR.cmd
load-spark-env.cmd pyspark2.cmd spark-class spark-shell.cmd spark-submit.cmd sparkR2.cmd
load-spark-env.sh run-example spark-class.cmd spark-shell2.cmd spark-submit2.cmd
</code></pre>
<p>我还将上述答案中提到的环境变量添加到了我的.bash_profile和.profile中</p>
<p>现在在spark/bin目录中，我首先要检查pyspark命令是否首先在shell上工作。</p>
<p>所以我在做了cd spark/bin之后</p>
<pre><code>SFOM00618927A:bin $ pyspark
-bash: pyspark: command not found
</code></pre>
<p>按照我能做的所有步骤回答</p>
<pre><code>pyspark
</code></pre>
<p>在终端的任何目录下，它应该启动一个带有火花引擎的笔记本电脑。但即使是外壳内的pyspark也不工作，忘了让它在juypter笔记本上运行吧</p>
<p>请告诉我这里出了什么问题。</p>
<p>编辑：</p>
<p>是的</p>
<pre><code>open .profile
</code></pre>
<p>在主目录中，这是存储在路径中的内容。</p>
<pre><code>export PATH=/Users/854319/anaconda/bin:/usr/local/bin:/usr/bin:/bin:/usr/sbin:/sbin:/Library/TeX/texbin:/Users/854319/spark/bin
export PYSPARK_DRIVER_PYTHON=ipython
export PYSPARK_DRIVER_PYTHON_OPTS='notebook' pyspark
</code></pre>
请先 登录 后评论
针对此问题: 更多的回答
- 89 关注
- 1 收藏，216 浏览
- 网友 提问于 2天前
相关Python问题
- 如何在Excel中读取公式并将其转换为Python中的计算？ 1 回答
- 如何在excel中读取嵌入的excel，并将嵌入文件中的信息存储在主excel文件中？ 8 回答
- 如何在Excel中返回未知列长度的非空顶行列值？ 1 回答
- 如何在excel中选择数据列？ 7 回答
- 如何在Excel中通过脚本自动为一列中的所有单元格创建公共别名 7 回答
- 如何在excel中高效格式化范围AttributeError:“tuple”对象没有属性“fill” 8 回答
- 如何在excel单元格中编写python函数 8 回答
- 如何在excel单元格中自动执行此python代码？ 9 回答
- 如何在excel工作表中创建具有相应值的新列 10 回答
- 如何在Excel工作表中复制条件为单元格颜色的python数据框？ 5 回答
- 如何在Excel工作表中循环 5 回答
- 如何在excel工作表中打印嵌套词典？ 8 回答
- 如何在excel工作表中绘制所有类的继承树？ 8 回答
- 如何在Excel工作表中自动调整列宽？ 10 回答
- 如何在excel工作表中追加并进一步处理 9 回答
- 如何在excel工作表之间进行更改？ 4 回答
- 如何在excel或csv上获取selenium数据？ 6 回答
- 如何在Excel或Python中将正确的值赋给正确的列 10 回答
- 如何在excel或python中提取单词周围的文本？ 3 回答
- 如何在excel或python中转换来自Jira的3w 1d 4h的fromat数据？ 9 回答
