跟随到scrapy中的重定向链接

Question

我该怎么设置？我已经写了handle_httpstatus_list=[301，302，303]，但是scrapy没有跟随新的链接，它只是开始保存空文件的页面。

体育英语不是我的母语。为此我感到高兴。

Answer 1

默认情况下，Scrapy确实处理重定向，这意味着RedirectMiddleware在DOWNLOADER_MIDDLEWARES设置中被激活，REDIRECT_ENABLED设置被设置为True。

Answer 2

您还需要在请求中提到dont_redirect = true：

meta = {'dont_redirect': True, "handle_httpstatus_list" : [301, 302, 303]}

问候