如何加载html页面,然后刮页

2024-05-29 02:04:40 发布

您现在位置:Python中文网/ 问答频道 /正文

嗨,我想刮https://www.tiktok.com/trending?lang=en,我必须等待加载视频。然后我要抓取视频数据。你知道吗

page = requests.get('https://www.tiktok.com/trending?lang=en', timeout=5)
soup = bs(page.text, 'html.parser')
video_list = soup.find_all('a')
print(video_list)

主要问题是tiktok需要一些时间来加载该页面的视频列表。所以你可以先查网址帮我。我检查了硒与幻影,但没有工作。 谢谢你的帮助。你知道吗


Tags: 数据httpscomlangget视频wwwvideo

热门问题