通过索引有效地搜索大型硬盘中的文件类型

2024-04-28 21:52:59 发布

您现在位置:Python中文网/ 问答频道 /正文

我的问题与“How to improve searching with os.walk and fnmatch”有点相关,但我想扩展一下

假设我们在硬盘上有一个文件集合,大约有10-50TB大。我想定期查找所有有特定结尾的文件。随着新文件的添加,集合每天都会更改。在第一次运行时,我希望存储获得的信息,以便在接下来的运行中只需搜索更改的文件,我将其理解为文件系统的某种索引,并希望大大加快每次连续搜索的速度

我更喜欢用python工作,但是对于一个现成的软件解决方案以及其他语言的开源项目的提示是非常感谢的


Tags: and文件to信息软件searchingoswith