为什么Python'Memory Error`带有list`append（）`lot of RAM

Question

我正在用一组文本文件建立一个大数据字典。当我阅读并处理这些行时，我append(dataline)到一个列表。

在某个时刻，append()会生成一个Memory Error异常。但是，看着程序在Windows任务管理器中运行，在崩溃的时候，我看到4.3gb可用，1.1gb可用。

因此，我不明白这个例外的原因。

Python版本是2.6.6。我想，唯一的原因是它不能使用更多的可用内存。如果是这样，是否有可能增加拨款？

Answer 1

如果您愿意重新构造代码，而不是向其投入更多的内存，那么您可能可以通过以下操作：

data = (processraw(raw) for raw in lines)

其中lines是行列表或file.xreadlines()或类似的。