使用Beautiful Soup加载更多数据并在页面中导航

2024-10-04 01:35:25 发布

您现在位置：Python中文网/ 问答频道 /正文
9008 3

所以我想用beautifulsoup4在ratemyprof中查询滑铁卢教授的信息。数据需要从导航栏中获取，在导航栏中，您需要不断按“加载更多”来加载更多数据。在

此外，在检查loadmore按钮时，它链接到一个javascript函数。如何编写代码来不断加载更多的代码，直到无法加载为止？ 下面是对按钮进行检查时的一个片段：Load More Inspection

有人能帮我写一个循环从这个页面提取信息：“http://www.ratemyprofessors.com/search.jsp?queryBy=schoolId&schoolName=University+of+Waterloo&schoolID=1490&queryoption=TEACHER”


Tags： 数据函数代码信息链接moreload页面
1条回答
网友
1楼 · 发布于 2024-10-04 01:35:25

这不容易。在

使用evaluateJavaScript获取js加载的更多数据。在

或者selenium可能对你有帮助。在

另请参见other answer

相关问题 更多 >

    编程相关推荐