Python中文
首页
教程
问答
标签
搜索
登录
注册
如何用scrapy提交表格?
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我尝试使用scrapy完成登录并收集我的项目提交计数。这是代码</p> <pre><code>from scrapy.item import Item, Field from scrapy.http import FormRequest from scrapy.spider import Spider from scrapy.utils.response import open_in_browser class GitSpider(Spider): name = "github" allowed_domains = ["github.com"] start_urls = ["https://www.github.com/login"] def parse(self, response): formdata = {'login': 'username', 'password': 'password' } yield FormRequest.from_response(response, formdata=formdata, clickdata={'name': 'commit'}, callback=self.parse1) def parse1(self, response): open_in_browser(response) </code></pre> <p>在运行代码之后</p> <pre><code>scrapy runspider github.py </code></pre> <p>它应该向我显示表单的结果页,这应该是一个失败的登录在同一页的用户名和密码是假的。然而,它向我展示了<a href="https://github.com/search" rel="noreferrer">search page</a>。日志文件位于<a href="http://pastebin.com/0gRaNm7D" rel="noreferrer">pastebin</a></p> <p>代码应该如何修复?提前谢谢</p>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>使用“formname”参数也可以:</p> <pre><code>yield FormRequest.from_response(response, formname='Login', formdata=formdata, clickdata={'name': 'commit'}, callback=self.parse1) </code></pre>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
jupyter运行一个旧的pytorch版本
6 回答
Jupyter运行不同版本的卸载库?
4 回答
Jupyter运行指定的键盘快捷键
2 回答
Jupyter通过.local文件“逃逸”virtualenv。我该如何缓解这种情况?
8 回答
Jupyter重新加载自定义样式
1 回答
Jupyter错误:“没有名为Jupyter_core.paths的模块”
4 回答
jupyter错误:无法在随机林中将决策树视为png
2 回答
Jupyter错误'内核似乎已经死亡,它将自动重新启动'为一个给定的代码块
1 回答
Jupyter错误地用阿拉伯语和字母数字元素显示Python列表
4 回答
Jupyter隐藏数据帧索引,但保留原始样式
10 回答
Jupyter集线器:启动器中出现致命错误。。。系统找不到指定的文件
8 回答
Jupyther中相同值的相同哈希,但导出到Bigquery时不相同
1 回答
Jupy上Python的读/写访问问题
5 回答
jupy上没有模块cv
1 回答
Jupy上的排序错误
7 回答
Jupy中bqplot图形的紧凑布局
4 回答
Jupy中matplotlib plot的连续更新
2 回答
Jupy中Numpy函数的文档
2 回答
Jupy中Pandas的自动完成问题
9 回答
jupy中Qt后端的Matplotlib动画
7 回答