2024-05-29 07:35:50 发布
网友
看看snakebite,它是一个很棒的python包,用于运行hadoop fs一组命令
hadoop fs
我需要在python中运行hadoop dfsadmin组命令。编写需要运行命令的工具,如hadoop dfsadmin -report和hadoop dfsadmin -refreshNodes
hadoop dfsadmin
hadoop dfsadmin -report
hadoop dfsadmin -refreshNodes
因此,对于所有在hadoop操作任务上编写工具的优秀python开发人员来说,运行这些命令集的推荐方法是什么?在
脱壳成本很高,有没有其他推荐的方法/建议?在
您可以使用hdfs-thrift库。我不确定这个库有多完整,但这里有几个链接。最好的选择是为Python引用Clouderas色调库。我确实看到了refreshNodes的函数调用。在
{hdthrift第页
用于hdf的Cloudera色调库-这些是由Thrifthttps://github.com/cloudera/hue/tree/master/desktop/libs/hadoop/gen-py/hadoop/api/hdfs自动生成的
在hdfs.节俭https://github.com/cloudera/hue/blob/master/desktop/libs/hadoop/java/if/hdfs.thrift
您可以使用hdfs-thrift库。我不确定这个库有多完整,但这里有几个链接。最好的选择是为Python引用Clouderas色调库。我确实看到了refreshNodes的函数调用。在
{hdthrift第页
用于hdf的Cloudera色调库-这些是由Thrifthttps://github.com/cloudera/hue/tree/master/desktop/libs/hadoop/gen-py/hadoop/api/hdfs自动生成的
在hdfs.节俭https://github.com/cloudera/hue/blob/master/desktop/libs/hadoop/java/if/hdfs.thrift
相关问题 更多 >
编程相关推荐