从没有urllib或json的站点获取信息

Question

我想以某种复制/粘贴格式从页面获取所有信息，但由于安全限制，我无法使用该站点的urllib或json信息。我想知道python是否有办法打开一个网页并复制实际的页面本身，而不是从API中检索html代码或JSON？你知道吗

Answer 1

视情况而定。。。您想只使用标准python吗？如果是，则：

• 如果您在Windows上，您可以下载带有^{}

• 在linux或mac上，您可以使用curl

  curl http://www.centos.org > centos-org.html

连同^{}

否则，另一个答案提到了selenium这样的包。你知道吗

Answer 2

您可以通过^{}在真实浏览器中加载网页，并获得^{}：

from selenium import webdriver

driver = webdriver.Firefox()
driver.get("url")

print(driver.page_source)