Tiktok使用Beautifulsoup进行网络垃圾处理,但不从频道获取视频URL或视频ID

2024-10-06 16:23:17 发布

您现在位置:Python中文网/ 问答频道 /正文

我正在使用beautifulsoup清理tiktok频道(频道链接:https://www.tiktok.com/@agt?)。所以基本上我需要从这个频道获取视频链接。例如:第一个视频链接是https://www.tiktok.com/@agt/video/6787079306066660614,但我在浏览频道时找不到它

以下是我当前使用的代码:


import time
from bs4 import BeautifulSoup
from selenium import webdriver
from selenium.webdriver.chrome.options import Options



url = 'https://www.tiktok.com/@agt'
options = Options()
options.add_argument('--headless')
options.add_argument('--disable-gpu')
driver = webdriver.Chrome(chrome_options=options)
driver.get(url)
time.sleep(3)
page = driver.page_source
driver.quit()
soup = BeautifulSoup(page, 'html.parser')
print(soup)

如果问题不够清楚,请告诉我。


Tags: fromhttpsimportcom视频time链接www