Python中文网 - 问答频道, 解决您学习工作中的Python难题和Bug
Python常见问题
我正试图从这个网页上获取信息：https://www.tmea.org/programs/all-state/history
我想从第一个下拉菜单中选择几个选项，并使用Beautiful Soup来拉取我需要的信息。首先，我试着用靓汤提取不同的选择：
import requests
from bs4 import BeautifulSoup
page = requests.get('https://www.tmea.org/programs/all-state/history')
soup = BeautifulSoup(page.text, 'html.parser')
body = soup.find(id = 'organization')
options = body.find_all('option')
for name in options:
child = name.contents[0]
print(child)
这对于拉取不同的选项很有效，但是我希望能够提交一个特定的选项并获取该信息。我试着补充：
^{pr2}$我以前在其他使用POST的页面中使用过这个，我不太明白为什么这个例子不同。使用下拉选项是否意味着我必须使用诸如Selenium之类的东西？我以前用过，但我不知道怎么和靓汤一起用。在
Tags： httpsorgimport信息www选项pageall
热门问题
- 我想从用户inpu创建一个类的实例
- 我想从用户导入值，为此
- 我想从用户那里得到一个整数输入，然后让for循环遍历该数字，然后调用一个函数多次
- 我想从用户那里收到一个列表，并在其中执行一些步骤，然后在步骤完成后将其打印回来，但它没有按照我想要的方式工作
- 我想从用户那里获取输入，并将值传递给（average=dict[x]/6），然后在那里获取resu
- 我想从第一个列表中展示第一个词，然后从第二个列表中展示十个词，以此类推- Python
- 我想从第一个空lin开始解析文本文件
- 我想从简历、简历中提取特定部分
- 我想从给定字典（python）的字符串中删除\u00a9、\u201d和类似的字符。
- 我想从给定的网站Lin下载许多文件扩展名相同的Wget或Python文件
- 我想从网上搜集一些关于抵押贷款的数据
- 我想从网站上删除电子邮件地址
- 我想从网站上读取数据该网站包含可下载的文件，然后我想用python脚本把它发送给oracle如何？
- 我想从网站中提取数据，然后将其显示在我的网页上
- 我想从网页上提取统计数据。
- 我想从网页上解析首都城市，并在用户输入国家时在终端上打印它们
- 我想从色彩图中删除前n个颜色，而不丢失原始颜色数
- 我想从课堂上打印字典里的键
- 我想从费用表中获取学生上次支付的费用，其中学生id=id
- 我想从较低的顺序对多重列表进行排序，但我无法在一行中生成结果
热门文章
- Python覆盖写入文件
- 怎样创建一个 Python 列表？
- Python3 List append()方法使用
- 派森语言
- Python List pop()方法
- Python Django Web典型模块开发实战
- Python input() 函数
- Python3 列表(list) clear()方法
- Python游戏编程入门
- 如何创建一个空的set?
- python如何定义(创建)一个字符串
- Python标准库 [The Python Standard Library by Ex
- Python网络数据爬取及分析从入门到精通（分析篇）
- Python3 for 循环语句
- Python List insert() 方法
- Python 字典(Dictionary) update()方法
- Python编程无师自通 专业程序员的养成
- Python3 List count()方法
- Python 网络爬虫实战 [Web Crawler With Python]
- Python Cookbook（第2版）中文版
1）我没有看到在XHR和Fetch中使用POST（见下面的编辑）
2）是的，你可以用硒来做这个。像平常一样用硒来做桌子。一旦表被渲染，你就可以把它输入BeautifulSoup。例如：
老实说，我不会为此费心使用beauthoulsoup，因为它看起来像是一个
^{pr2}$<table>标记。让熊猫来做这个工作：编辑
我在Doc下找到了POST请求方法。您需要在有效负载中包含更多参数：
输出：
相关问题 更多 >
编程相关推荐