Python中文
首页
教程
问答
标签
搜索
登录
注册
Pysp上saveAsTextFile()中命令字符串异常中的(空)项
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我在PySpark工作,在windows 7中开发Jupyter笔记本(Python 2.7)。我有一个<code>pyspark.rdd.PipelinedRDD</code>类型的RDD,叫做<code>idSums</code>。尝试执行<code>idSums.saveAsTextFile("Output")</code>时,收到以下错误:</p> <pre><code>Py4JJavaError: An error occurred while calling o834.saveAsTextFile. : org.apache.spark.SparkException: Job aborted due to stage failure: Task 1 in stage 33.0 failed 1 times, most recent failure: Lost task 1.0 in stage 33.0 (TID 131, localhost): java.io.IOException: (null) entry in command string: null chmod 0644 C:\Users\seride\Desktop\Experiments\PySpark\Output\_temporary\0\_temporary\attempt_201611231307_0033_m_000001_131\part-00001 </code></pre> <p>在我看来,RDD对象不应该有任何问题,因为我能够毫无错误地执行其他操作,例如,执行<code>idSums.collect()</code>会产生正确的输出。</p> <p>此外,创建<code>Output</code>目录(包含所有子目录)并创建文件<code>part-00001</code>,但它是0字节。</p>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>我有一个类似的异常,在加载在其他机器中构建的模型并在Windows系统中复制时出现了权限问题,尽管HADOOP_HOME已经设置好。 我刚刚在我的模型文件夹上运行了以下命令-</p> <p>winutils.exe chmod-R 777模型路径。</p>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
如何在Excel中读取公式并将其转换为Python中的计算?
4 回答
如何在excel中读取嵌入的excel,并将嵌入文件中的信息存储在主excel文件中?
6 回答
如何在Excel中返回未知列长度的非空顶行列值?
10 回答
如何在excel中选择数据列?
3 回答
如何在Excel中通过脚本自动为一列中的所有单元格创建公共别名
9 回答
如何在excel中高效格式化范围AttributeError:“tuple”对象没有属性“fill”
5 回答
如何在excel单元格中编写python函数
8 回答
如何在excel单元格中自动执行此python代码?
2 回答
如何在excel工作表中创建具有相应值的新列
2 回答
如何在Excel工作表中复制条件为单元格颜色的python数据框?
7 回答
如何在Excel工作表中循环
5 回答
如何在excel工作表中打印嵌套词典?
6 回答
如何在excel工作表中绘制所有类的继承树?
7 回答
如何在Excel工作表中自动调整列宽?
9 回答
如何在excel工作表中追加并进一步处理
7 回答
如何在excel工作表之间进行更改?
1 回答
如何在excel或csv上获取selenium数据?
8 回答
如何在Excel或Python中将正确的值赋给正确的列
1 回答
如何在excel或python中提取单词周围的文本?
9 回答
如何在excel或python中转换来自Jira的3w 1d 4h的fromat数据?
1 回答