Python中文
首页
教程
问答
标签
搜索
登录
注册
Python请求未能提供整个响应
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我目前正在学习网络报废。今天我试着去废纸谷歌网站搜索。当我尝试使用python请求库发出get请求时,它并没有提供完整的响应。你知道吗</p> <p>例如,如果我调用这个URL <a href="https://www.google.com/search?q=tea+meaning" rel="nofollow noreferrer">https://www.google.com/search?q=tea+meaning</a>来获取单词tea的含义,那么在得到的响应中,它只显示名词内容,而不是动词内容。你知道吗</p> <pre><code>from bs4 import BeautifulSoup as bs import requests as req headers_Get = { 'Host': 'www.google.com', 'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Ubuntu Chromium/74.0.3729.169 Chrome/74.0.3729.169 Safari/537.36', 'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8', 'Accept-Language': 'en-US,en;q=0.5', 'Accept-Encoding': 'gzip, deflate', 'DNT': '1', 'Connection': 'keep-alive', 'Upgrade-Insecure-Requests': '1' } url = "https://www.google.com/search?q=tea+meaning" response = req.get(url, headers=headers_Get) data = response.text soup = bs(data, "html.parser") </code></pre> <p>这道汤有问题。它不包含动词内容。 为什么会这样?你知道吗</p> <p><a href="https://i.stack.imgur.com/blHQu.png" rel="nofollow noreferrer"><img src="https://i.stack.imgur.com/blHQu.png" alt="enter image description here"/></a></p> <p>谢谢你。你知道吗</p>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>问题是谷歌没有将搜索结果作为一个页面发送回去。您在浏览器中看到的大多数搜索结果都是单独的AJAX请求。您可能会在初始请求中获得一些部分数据,但它不一定与常规浏览器中看到的内容相匹配。你知道吗</p> <p>要想知道如何处理漂亮的汤和请求,请尝试在关闭JavaScript的浏览器中打开链接。你知道吗</p>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
jupyter运行一个旧的pytorch版本
3 回答
Jupyter运行不同版本的卸载库?
1 回答
Jupyter运行指定的键盘快捷键
9 回答
Jupyter通过.local文件“逃逸”virtualenv。我该如何缓解这种情况?
4 回答
Jupyter重新加载自定义样式
5 回答
Jupyter错误:“没有名为Jupyter_core.paths的模块”
5 回答
jupyter错误:无法在随机林中将决策树视为png
8 回答
Jupyter错误'内核似乎已经死亡,它将自动重新启动'为一个给定的代码块
9 回答
Jupyter错误地用阿拉伯语和字母数字元素显示Python列表
5 回答
Jupyter隐藏数据帧索引,但保留原始样式
8 回答
Jupyter集线器:启动器中出现致命错误。。。系统找不到指定的文件
1 回答
Jupyther中相同值的相同哈希,但导出到Bigquery时不相同
6 回答
Jupy上Python的读/写访问问题
10 回答
jupy上没有模块cv
2 回答
Jupy上的排序错误
7 回答
Jupy中bqplot图形的紧凑布局
10 回答
Jupy中matplotlib plot的连续更新
7 回答
Jupy中Numpy函数的文档
1 回答
Jupy中Pandas的自动完成问题
5 回答
jupy中Qt后端的Matplotlib动画
3 回答