pywhdfs:python web hdfs客户端。

pywhdfs的Python项目详细描述


Pywhdfs
==


Web HDF的API和交互式命令行界面。

`` bash
$Pywhdfs-c prod

=----
--web hdfs客户端可用作“客户端”。--
----享受吧!————————————————————————————————————————————————————————————————————————————————————————————————————————————————u'user']
````

令牌)和不安全群集
*支持ha群集和处理namenode故障转移
*支持具有多个名称服务和装载点的hdfs联合。
*json格式群集配置。
*在python shell上与webhdfs api交互的命令行界面

*支持上传和下载的并发性。




Getting Started
----

```bash
$easy_install pywhdfs
```


configuration



一个简单的配置文件看起来像:

``json
{
“clusters”:[
{
“name”:“prod”,
“auth\u mechanism”:“gssapi”,
“verify”:false,
“trust store”:“trust/store/path.jks”,
“名称服务”:[
{
“url”:[“http://first_namenode_url:50070”,“http://second_namenode_url:50070”],
“mounts”:[“/”]
}
]
}
]
}
}
````

>配置文件根据[架构文件](pywhdfs/resources/config_schema.json)进行验证

配置文件的默认位置是“~/.webhdfs.cfg”,但可以使用
webhdfs_配置环境覆盖。变量。

用法
----

,“http://host2.hadoop.domain:50070”],“mounts”:[“/”]}),auth_mechanism=“gssapi”,verify=false)
>;>;client.list(“/”
````

交互shell要求在配置文件中设置群集的连接参数,
,群集名称需要与作为参数传递的名称匹配。

贡献
----


非常欢迎反馈和拉取请求!

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java如何通过不精确的参数类型获取构造函数?   找到java文件,但扫描程序未读取   在本地java服务器中部署google translation api,而不调用web服务。   java无法分析Adb版本(错误的ELF类)   java从模型到Servlet再到JSP选项列表获取信息   如何解决将xml文件转换为java文件时出现的错误?   Linux上从Java访问PC硬件端口   java如何覆盖Spring启动库属性?   java在maven的REST服务下获取JDBC连接   java如何将数组对象传递给构造函数?   java Spring BeanFactory作为Swing应用程序中的单例   带JsonDeserializer的java Lombok   用于多个文件的java Groovy脚本xml解析器   java如何从restful web服务中获取一些数据,并将其保存到数据库中?   servlet在java中提取ZIP   在Java中使用超类处理异常   java使hibernate在不使用@OneToOne@OneToMany等的情况下生成外键约束   基于tomcat web应用程序的用户角色的java只读访问   java在一个3乘n的表中找到具有最佳方差的3个值的集合   java Apache Commons CLI:获取选项的字符串值数组