Python 3:使用请求不能获得web pag的完整内容

2024-09-25 18:17:06 发布

您现在位置:Python中文网/ 问答频道 /正文

我正在使用requests模块进行测试,以获取网页的内容。但当我看内容时,我发现它并没有得到页面的全部内容。

这是我的代码:

import requests
from bs4 import BeautifulSoup

url = "https://shop.nordstrom.com/c/womens-dresses-shop?origin=topnav&cm_sp=Top%20Navigation-_-Women-_-Dresses&offset=11&page=3&top=72"
page = requests.get(url)

soup = BeautifulSoup(page.content, 'html.parser')
print(soup.prettify())

同样在chrome浏览器上,如果我查看页面源代码,我看不到完整的内容。

有没有办法得到我提供的示例页面的全部内容?


Tags: 模块代码fromimporturl网页内容page