提取谷歌搜索结果重定向

Question

我看过几个关于如何提取谷歌搜索结果中的网址的帖子，也用Python、curl和beautifulsoup写了一个类似的实现。

我想问的是，怎么才能提取谷歌的重定向链接（比如当你右键点击一个结果并选择“复制链接地址”时）呢？

Answer 1

谷歌的搜索结果页面通过ajax变得可以互动了。所以，BeautifulSoup无法直接提取链接。我建议先把页面内容读入一个字符串，这样就能获取到所有的HTML，然后再用BeautifulSoup来提取链接。