Python json内存b

Question

import json
import time
from itertools import count

def keygen(size):
    for i in count(1):
        s = str(i)
        yield '0' * (size - len(s)) + str(s)

def jsontest(num):
    keys = keygen(20)
    kvjson = json.dumps(dict((keys.next(), '0' * 200) for i in range(num)))
    kvpairs = json.loads(kvjson)
    del kvpairs # Not required. Just to check if it makes any difference                            
    print 'load completed'

jsontest(500000)

while 1:
    time.sleep(1)

Linuxtop表示python进程在完成'jsontest'函数后拥有大约450Mb的RAM。如果调用'json.loads”被省略，则不会观察到此问题。Agc.收集执行此函数后，会释放内存。在

看起来内存没有作为显式调用保存在任何缓存或python的内部内存分配器中gc.收集正在释放内存。在

发生这种情况是因为从未达到垃圾收集阈值（700、10、10）？

我确实在jsontest之后放了一些代码来模拟threshold。但没用。在

Answer 1

把这个放在你计划的首位

import gc
gc.set_debug(gc.DEBUG_STATS)

只要有收藏你就会得到打印输出。您将看到，在示例代码中，jsontest完成后，直到程序退出为止，没有集合。在

你可以把

^{pr2}$

来查看当前的计数。第一个数字是自上一次收集第0代以来分配超过释放的数量；第二个数字（resp。第三）是生成0的次数（分别为。1） 从第1代的最后一次收集开始收集。2） 一。如果您在jsontest完成后立即打印这些内容，您将看到计数是(548, 6, 0)或类似的（毫无疑问，这会因Python版本而异）。所以这个门槛没有达到，也没有收集。在

这是基于阈值的垃圾收集调度的典型行为。如果需要将空闲内存及时返回操作系统，则需要将基于阈值的调度与基于时间的调度结合起来（即，在自上次收集之后经过一定时间后，即使尚未达到阈值，也请求另一个收集）。在