将一个s3文件夹聚合到另一个

s3clumper的Python项目详细描述


生成的内容的tarball(可以选择使用gzip压缩) S3前缀(保留内部路径和文件名)将 tarball到指定的s3 url并选择性地删除源文件。

s3clumper: Aggregate S3 prefixes into tarballs in S3

Usage: s3clumper {{arguments}} {{options}}

Arguments:
  from [text]  S3 URL prefix to clump
  to [text]    S3 URL for target clump

Options:
  -h, --help      Show this help message and exit
  -H, --HELP      Help for all sub-commands
  -c, --check     Don't check for target (may over-write)
  -C, --nocolour  Suppress colours in reports
  -D, --debug     Enable debug logging
  -d, --delete    Don't delete source files
  -q, --quiet     Be quiet, be vewy vewy quiet
  -v, --verbose   Verbose output
  -V, --version   Report installed version
  -z, --compress  Don't compress the target

示例:

$ s3clumper s3://bucket1/data/ s3://bucket2/archive/logs-20170302.tar.gz
Fetching |################################| 55/55
Sending |################################| 100/100
Deleting |################################| 55/55

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java prometheus占用JDBC连接   java如何在ApacheDerby中选择聚合的学生/班级数据?   Java支持内部/本地/子方法吗?   java如何向Jsoup添加带有用户名和密码的代理?   servlets介绍如何创建java。木卫一。具有URI的文件对象?   java使用布尔值设置实体的字符串字段?   java API请求:无法从Android Studio工作   java无法从URL捕获JSON响应   Java中的amazon web服务AWS DynamoDB和MapReduce   为重载方法强制转换Java任务   JavaSolr+SpringRoo为每个客户提供单独的索引   父对象的java调用方法,即使子对象重写它?