使用googlebigquery和Python进行批处理

2024-04-25 05:06:39 发布

您现在位置：Python中文网/ 问答频道 /正文
2128 3

在python中使用googlebigqueryapi执行批插入最有效的方法是什么。我试图在一个大型数据集（1000000+）上使用这个code执行一个流行，但是插入它们需要一段时间。有没有更有效的方法在Python中插入大型数据集？在

  • 该表已存在，并且包含信息。在
  • 我有一个要插入的一百万个数据点的列表
  • 我想用Python来做，因为我会多次重用代码。在

Tags： 数据方法代码信息列表code我会googlebigqueryapi
1条回答
网友
1楼 · 发布于 2024-04-25 05:06:39

我不认为流式传输（Insert All API）在您的案例中没有意义
你应该试试Load Job
请参阅documentation中的python代码示例

相关问题 更多 >

    编程相关推荐