用python抓取网站时的最大页数

Question

我对python非常陌生，必须从网站上获取一些大学课程的数据：

Xrel

我能得到我需要的信息。问题是我需要它为每个条目（页，月，年）。在

每月的页数各不相同。有没有什么方法可以提取最大的pagenumber，这样我就可以存储它并将其用于循环？在

我会很感激你的帮助。谢谢！在

Answer 1

For循环很好，但不能总是使用它们。在这种情况下，我只需重复按“下一页”按钮中的链接，直到没有这样的按钮为止。像这样：

url = <first page>
while True:
    # extract data
    if <there is a next page button>:
        url = <href of the button>
    else:
        break