如何在Python中从一个大Json文件生成bucket?

2024-05-15 16:36:37 发布

您现在位置:Python中文网/ 问答频道 /正文

我有以下本地Json文件(大约90MB):

为了便于访问我的数据,我希望创建更小的Json文件,其中包含完全相同的数据,但每次只包含Readings.SensorData中的100个数组条目。所以一个包含前100个读数的文件,然后一个包含101-200个读数的文件,依此类推。。。我知道ijson库,但我想不出用最有效的内存方式来实现这一点

编辑:请注意,我知道如何使用标准json库实现这一点,但因为它是一个大文件,所以我希望能够以一种不完整的方式实现这一点

任何帮助都将不胜感激


Tags: 文件数据内存json编辑标准方式条目