Python中文网 - 问答频道, 解决您学习工作中的Python难题和Bug
Python常见问题
我的数据可以以关系数据库或对象数据库的方式显示。这种格式非常小（500 Mb），但当我合并我的表以使scikit能够学习处理它时（使它“整洁”，如统计社区中所说），这基本上是将所有表合并成一个唯一的表，它变得太大（17 Gb+），似乎是在浪费内存！这是因为有数以百万计的行共享许多相同的属性，因为它们与同一对象相关，因此许多数据都是冗余的、复制的和重复的。我可以使用技术来处理大数据，这可能是一个解决方案，但不可能完全避免吗？我可以直接在scikit learn中使用数据，而不必显式合并表吗？我可以在不占用额外内存的情况下进行模拟数据结构的隐式合并吗
Tags： 数据对象内存数据库属性格式方式浪费
热门问题
热门文章
- Python覆盖写入文件
- 怎样创建一个 Python 列表？
- Python3 List append()方法使用
- 派森语言
- Python Django Web典型模块开发实战
- Python List pop()方法
- Python input() 函数
- Python3 列表(list) clear()方法
- Python游戏编程入门
- 如何创建一个空的set?
- python如何定义(创建)一个字符串
- Python标准库 [The Python Standard Library by Ex
- Python网络数据爬取及分析从入门到精通（分析篇）
- Python3 for 循环语句
- Python List insert() 方法
- Python 字典(Dictionary) update()方法
- Python编程无师自通 专业程序员的养成
- Python3 List count()方法
- Python 网络爬虫实战 [Web Crawler With Python]
- Python Cookbook（第2版）中文版
目前没有回答
相关问题 更多 >
编程相关推荐