将stdin重定向到amazon kinisis firehose。
hydrant的Python项目详细描述
将stdin重定向到amazon kinisis firehose。
申请一次提交一条记录, 这限制了吞吐量。 未来的版本可能会为了性能而将记录批处理在一起, 但在那之前 小心使用高吞吐量流 (每秒15条或更多记录)。 从ec2内部运行将允许更高的吞吐量。
安装
安装到virtualenv中。
$ pip install --editable .
用法
管道新线将记录分为消防栓, 将每个记录发送到传送流:
$ producer | hydrant my-firehose-stream
如果不使用us-east-1:
$ producer | hydrant --region='us-west-2' my-firehose-stream
有关详细信息,请阅读帮助文本:
$ hydrant --help