基于leveldb的数据处理与存储数据库
pypeline-db的Python项目详细描述
Pypeline DB旨在简化 数据集。它有一个友好且易于掌握的api,并有强大的 共LevelDB。这样就可以 在不牺牲数据访问的情况下管理太大而无法放入RAM的数据集 表演。
pypeline非常适合:
- 在不占用所有RAM的情况下探索数据
- 使用地图、过滤器和精简功能转换数据
- 阻止您丢失或覆盖数据(除非 明确要求)
将数据集从pypeline导出到pandas 进一步分析。
基于leveldb的数据处理与存储数据库
Pypeline DB旨在简化 数据集。它有一个友好且易于掌握的api,并有强大的 共LevelDB。这样就可以 在不牺牲数据访问的情况下管理太大而无法放入RAM的数据集 表演。
pypeline非常适合:
将数据集从pypeline导出到pandas 进一步分析。