使用Beauty Soup（Python）从表中提取特定值

Question

我环顾了一下Stackoverflow，大多数指南似乎都非常详细地介绍了如何从表中提取所有数据。但是，我只需要提取一个，似乎无法从表中提取特定的值

刮取链接：

https://gis.vgsi.com/portsmouthnh/Parcel.aspx?pid=38919

我希望从链接中的表中提取“样式”值

代码：

import bs4

styleData=[]

pagedata = requests.get("https://gis.vgsi.com/portsmouthnh/Parcel.aspx?pid=38919") 
cleanpagedata = bs4.BeautifulSoup(pagedata.text, 'html.parser') 

table=cleanbyAddPD.find('div',{'id':'MainContent_ctl01_panView'})
style=table.findall('tr')[3]
style=style.findall('td')[1].text
print(style)
styleData.append(style)

Answer 1

还可以执行以下操作：

import bs4 
import requests
style_data = []
url = "https://gis.vgsi.com/portsmouthnh/Parcel.aspx?pid=38919"

soup = bs4.BeautifulSoup(requests.get(url).content, 'html.parser')
# select the first `td` tag whose text contains the substring `Style:`.
row = soup.select_one('td:-soup-contains("Style:")')
if row:
    # if that row was found get its sibling which should be that vlue you want
    home_style_tag = row.next_sibling
    style_data.append(home_style_tag.text)

几张便条

• 这使用CSS选择器而不是find方法。有关更多详细信息，请参见SoupSieve docs
• select_one依赖于这样一个事实，即表总是以某种方式排序，如果不是这样，则使用select并遍历结果以找到其文本正好是'Style:'的bs4.Tag，然后获取其下一个同级

使用select：

rows = soup.select('td:-soup-contains("Style:")')
row = [r for r in rows if r.text == 'Style:']
home_style_text = row.text