我为一个大型datar库编写了Python包装器。它的主要用途是:
- 以
R dataframe/tibble
的形式接收潜在的大量数据 - 把它转换成
Pandas dataframe
- 把它转换成
Koalas dataframe
所以我担心内存不足。我并不真的担心它有多快,因为它是一种变通方法,但它必须是可靠的。也不希望处理这是一个正式的管道。你知道吗
如果我的用户由于某种原因耗尽了内存,Python会自动将我的数据swap
放到磁盘上吗?它在Docker环境中运行的事实对此有影响吗?你知道吗
Tags:
目前没有回答
相关问题 更多 >
编程相关推荐