自动油门超越下载延迟吗?

2024-06-16 09:55:10 发布

您现在位置:Python中文网/ 问答频道 /正文

关于^{}的蹩脚文档说:“自动油门扩展调整下载延迟。”节流算法部分的文档接着指出“[下载延迟]不能小于DOWNLOAD_DELAY或大于AUTOTHROTTLE_MAX_DELAY”,所以我假设它们可以一起使用吗?在

我想知道AUTOTHROTTLE是否覆盖DOWNLOAD_DELAY,如果值复合,以及是否这两个设置可以一起使用?到底是什么情况?在


Tags: 文档算法download情况maxdelay节流油门
1条回答
网友
1楼 · 发布于 2024-06-16 09:55:10

The AutoThrottle extension honours the standard Scrapy settings for concurrency and delay. This means that it will respect CONCURRENT_REQUESTS_PER_DOMAIN and CONCURRENT_REQUESTS_PER_IP options and never set a download delay lower than DOWNLOAD_DELAY.

我在文档中找到了这个注释,可以解答您的疑问。在

相关问题 更多 >