Js网站不返回剃须数据

Question

我使用的脚本我总是用来从网上刮取数据，但我没有得到成功

我想从网站上的表格中获取数据：

https://www.rad.cvm.gov.br/ENET/frmConsultaExternaCVM.aspx

我使用以下代码进行刮片：

from bs4 import BeautifulSoup
from selenium import webdriver

url = "https://www.rad.cvm.gov.br/ENET/frmConsultaExternaCVM.aspx"

browser = webdriver.PhantomJS()
browser.get(url)
html = browser.page_source
bs = BeautifulSoup(html, 'lxml')
print(bs)

目前我只从站点接收js，而不是从表本身接收数据

Answer 1

是否将HTTP POST发送到https://www.rad.cvm.gov.br/ENET/frmConsultaExternaCVM.aspx/PopulaComboEmpresas

这将以JSON的形式返回表的数据

在浏览器中执行F12>；网络>；Fetch/XHR以查看更多详细信息，如HTTP头和POST正文