尝试使用Scrapy刮取时使用555 HTTP协议

2024-04-19 02:25:59 发布

您现在位置:Python中文网/ 问答频道 /正文

我正在尝试用Scrapy刮一个网站。它可以访问带有“状态代码200”的robots.txt文件

但我在发送请求的终端中得到:

[scrapy.core.engine] DEBUG: Crawled (555) <POST https://www.<the_link>.ca/<part_of_link>/UpdateQuery> (referer: None)
b'{"d":{"Message":"SESSION_TIMEOUT","Result":null,"Succeeded":false}}'

我试着在互联网上查找大约555。然而,我找不到太多的解释

https://httptoolkit.tech/blog/new-http-status-code-555那里得到了一些信息,但没有非常清楚

我已经在邮递员身上试过了。第一次发送请求时,我得到了555个错误,第二次发送请求时,我得到了状态码200

但是,我如何在Scrapy脚本中处理这个问题

如果有人能帮我解决这个问题,我会很高兴的

多谢各位


Tags: 文件代码httpscoredebugtxt终端网站