在python中读取一块“面向记录的JSON文件”

2024-06-09 04:04:18 发布

您现在位置:Python中文网/ 问答频道 /正文

我有一个JSON文件,其中的数据存储在记录中。在

[{"count": 3, "articleTag": "muslims,myanmar,viral sach", "articleId": "587044", "deviceId": "0652c917-6241-4f1d-bad2-520ce8df0db5", "articleCategory": "VIDEO"}, {"count": 2, "articleTag": "vyakti vishesh,story,kim jong", "articleId": "587057", "deviceId": "0652c917-6241-4f1d-bad2-520ce8df0db5", "articleCategory": "VIDEO"}]

如果我读这个文件pd.read_json(filepath,orient='records')。然后我的系统就挂了。分块读取文件的最佳方式是什么。在

文件大小以GB为单位。我需要分块读取。在


Tags: 文件数据jsonvideocount记录分块myanmar