解压缩文件而不创建临时文件

2024-03-28 00:18:32 发布

您现在位置:Python中文网/ 问答频道 /正文

我从AWS S3下载了一个zip文件并将其解压。解压缩后,所有文件都保存在tmp/文件夹中

s3 = boto3.client('s3')

s3.download_file('testunzipping','DataPump_10000838.zip','/tmp/DataPump_10000838.zip')

with zipfile.ZipFile('/tmp/DataPump_10000838.zip', 'r') as zip_ref:
    zip_ref.extractall('/tmp/')
    lstNEW = zip_ref.namelist()

listNEW的输出如下:

['DataPump_10000838/', '__MACOSX/._DataPump_10000838', 'DataPump_10000838/DockBooking', '__MACOSX/DataPump_10000838/._DockBooking', 'DataPump_10000838/LoadEquipment', '__MACOSX/DataPump_10000838/._LoadEquipment', ....]

LoadEquipment和DockBooking是文件,但其余的不是。是否可以在不创建临时文件的情况下解压缩文件?或者我可以过滤掉真实的文件吗?因为以后,我需要使用正确的文件并对它们进行gzip

$item_$unixepochtimestamp.csv.gz

我是否使用压缩功能


Tags: 文件文件夹clientawsrefs3downloadzip
1条回答
网友
1楼 · 发布于 2024-03-28 00:18:32

要仅提取某些文件,可以将列表传递给extractall

with zipfile.ZipFile('/tmp/DataPump_10000838.zip', 'r') as zip_ref:
    lstNEW = list(filter(lambda x: not x.startswith("__MACOSX/"), zip_ref.namelist()))
    zip_ref.extractall('/tmp/', members=lstNEW)

这些文件不是临时文件,而是macOS在zip文件中表示资源分叉的方式,通常不支持这种方式

相关问题 更多 >