- 当前热门话题：
Python hadoop
-
本站为您提供最新、最全的hadoop的Python教程、文档、代码、资源等相关内容，Python中文网技术交流社区同时还提供学习资源下载，
如：电子书、IDE编辑器软件、编程视频、代码规范标准、WEB开发、GUI、科学计算与人工智能等相关内容。
本文网址：https://www.cnpython.com/tags/248461
欢迎加入QQ群-->： 979659372
关于hadoop 相关联的Python项目和问题：
最新问答
我用这个作为文档建议http://spark.apache.org/docs/1.1.1/submitting-applications.html
spsark版本1.1.0
./spark/bin/ ...
已阅读: n次
我运行了一个map reduce程序来读取HDFS文件，如下所示：
hadoop jar /opt/mapr/hadoop/hadoop-0.20.2/contrib/streaming/hadoop ...
已阅读: n次
我正在尝试使用shell脚本中的以下命令运行hadoop流式服务器
hadoop jar /usr/local/hadoop/contrib/streaming/hadoop-0.19.2-strea ...
已阅读: n次
当我在RESTClient中执行PUT请求时，它可以工作，但在PostmanChrome扩展中失败。
我需要调用Hadoop REST API。当我使用curl时，一切正常，就像使用RESTClien ...
已阅读: n次
我在学蜂巢。我已经设置了一个名为records的表。架构如下：
year : string
temperature : int
quality : int
以下是示例行
199 ...
已阅读: n次
通常，我可以打开一个像这样的新文件：
aDict = {}
with open('WordLists/positive_words.txt', 'r') as f:
aDict['positi ...
已阅读: n次
我是新手，尝试在Windows中使用它。我能够使用hadoop的预构建版本成功地下载并安装Spark1.4.1。在以下目录中：
/my/spark/directory/bin
我可以运行spark ...
已阅读: n次
我是新来的火花，我无法找到这个。。。我有很多拼花文件上传到s3的位置：
s3://a-dps/d-l/sco/alpha/20160930/parquet/
此文件夹的总大小为20+ Gb，。如何将 ...
已阅读: n次
对于MapReduce，一个框架或库，什么是最好的Python实现，可能和Apache hadoop一样好，但如果它是Python中的，最好是有良好的文档和易于理解，完全为MapReduce模式实现， ...
已阅读: n次
所以，我一直在使用Python中的fabric包为各种HDFS任务运行shell脚本。在
但是，每当我运行任务来检查HDFS中是否已经存在一个文件/目录时，它只会退出shell。下面是一个示例（我使用 ...
已阅读: n次
我是R的长期用户，最近开始使用Python。使用传统的RDBMS系统进行数据仓库存储，使用R/Python进行数字处理，我觉得现在有必要着手进行大数据分析。
我想知道如何开始大数据处理。
-如何从M ...
已阅读: n次
我试图在python中使用hbase，并使用cloudera存储库安装hadoop/hbase包。它似乎可以工作，因为我可以使用shell访问和处理数据库，但它不能在python中完全工作。
我知道要 ...
已阅读: n次
最新项目
[！[生成状态]（https://travis-ci.org/wuhaifengdhu/python-shifu.svg?branch=master)](https://travis-ci.org/w ...
已阅读: n次
ckanext hdfs-hdfs存储扩展名
ckanext hdfs是在hdfs-hadoop分布式文件系统中启用文件存储的扩展。
此扩展提供了一种能力，允许用户将特定资源存储在hdfs中，而不是 ...
已阅读: n次
通过pyspark的newAPIHadoopRDD方法直连hbase，返回dataframe，hbase:1.2
需配置系统变量 HBASE_CONF 来确定hbase的配置文件地址
eg: ...
已阅读: n次
基于python的hadoop命令行界面 ...
已阅读: n次
问题陈述
fibonacci数的有效生成是
计算机科学，还没有达成一致的标准解决方案。
建议的解决方案
我们介绍了fibdb，这是有史以来第一个关系数据库
设计用于生成和存储fibonacci中 ...
已阅读: n次
apache mesos是一个提供高效资源隔离的集群管理器。
以及跨分布式应用程序共享。米索斯可以运行hadoop，詹金斯，
Spark、Aurora和动态共享节点池上的其他应用程序。
这个包为基于
...
已阅读: n次
访问Hadoop WebHDFS REST API的python 2/3包装库
安装
从pypi安装webhdfspy：
$ pip install webhdfspy
python版本
w ...
已阅读: n次
P&G;\s Hadoop群集的地理消费者数据预处理
此包Python名称：geo_hood
目前版本： geo_hood 0.2
...
已阅读: n次
mysql自动保存hadoop
此包Python名称：mysqlautosave
目前版本： mysqlautosave 1.0
最 ...
已阅读: n次
目前尚待待解决的问题还未得到足够的====hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs-hdfs ...
已阅读: n次
mrjob是一个python 2.7/3.5+包，可以帮助您编写和运行hadoop
流作业。
Stable version (v0.6.10) documentation
Development v ...
已阅读: n次
#hadeploy
hadeploy是一个特别设计的工具，用于在bigdata/nosql上下文中以hadoop集群作为第一目标部署应用程序。
在这种情况下，部署应用程序不仅仅是在某个地方部署一些ja ...
已阅读: n次
这是hadoop和hive-thrift python的蛋化版本
图书馆。
libs是从clouderas hadoop发行版和
这个包的版本包括hadoop的上游版本
分配。
建立分布
要从源树构 ...
已阅读: n次
python库是一个
函数和类的集合，用于简化
Juju Charms用于大数据应用程序。它
包括以下实用程序：
与apache hadoop交互
连接到核心apache hadoopplatfor ...
已阅读: n次
python lzo索引器
==================
！[]（https://travis-ci.org/duedil-ltd/python-lzo-indexer.png）
< BR ...
已阅读: n次
seal：在hadoop上处理排序数据。
seal是一个基于hadoop的应用程序工具包，用于处理大量
排序数据。 ...
已阅读: n次
#python hadoop conf读取hadoop配置文件并获取属性字典。用法：``pythonfrom hadoopconf import get_hadoop_confconf=get_had ...
已阅读: n次
Tensorflowspark
TensorFlowOnSpark brings scalable deep learning to Apache Hadoop and Apache Spark
c ...
已阅读: n次
hadoop_ranger_audit====为hadoop apache ranger策略生成一个独立的基于web的报告。对active directory执行反向查找，以将用户与已使用ad组配置的 ...
已阅读: n次
因为映射和还原并不难。
什么是还原？
reductio是一个针对python的极简的map-reduce框架。它运行在
fabric和setuptools，您可能已经使用它们将代码放到其他
机器。
...
已阅读: n次
