使用python和bs4抓取后的不同数据

2024-09-18 16:47:15 发布

您现在位置:Python中文网/ 问答频道 /正文

我想知道亚马逊上的评论数量。 然而,当我获取数据时,它与网站上的数据不同。 (131是从亚马逊抓取的,655是从亚马逊抓取的) 我附上了页面截图和剪贴后的截图

131 reviews

655 reviews

From inspect element

import bs4
import requests
import time


url3 = "https://www.amazon.it/dp/B076S8NSCD"

headers = {"User-Agent" : 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/13.0.5 Safari/605.1.15'}

res = requests.get(url3, headers = headers)

soup = bs4.BeautifulSoup(res.text, "html.parser")


reviews = soup.find(id = "acrCustomerReviewText").get_text()
print(reviews)

Tags: 数据textimportget数量网站评论res