WebScraping从td类中提取值

2024-09-28 22:39:04 发布

您现在位置:Python中文网/ 问答频道 /正文

我正试图编写一个简单的Py web抓取文件,从网页上的表中提取特定值,但在当前的正式版本中没有结果。我想我对soup.find命令做了一些不正确的操作

URL = 'https://www.health.nsw.gov.au/news/Pages/20200329_01.aspx'
page = requests.get(URL)

soup = BeautifulSoup(page.content, 'html.parser')

results = soup.find('td', class_='moh-rteTableFooterOddCol-6')
print(results)

我期望值为93099,但打印提供了结果

<td class="moh-rteTableFooterOddCol-6">93,099</td>

我也无法将结果的格式转换为字符串

一个屏幕截图,以备不时之需 A screenshot in case it helps


Tags: 文件py版本weburl网页pagefind
3条回答

您需要将.text添加到results中,如下所示:

print(results.text)

print(results)更改为print(results.string)将在控制台中显示:

93099 这是你想要的吗

您可以使用contents属性访问它

import requests
from bs4 import BeautifulSoup

URL = 'https://www.health.nsw.gov.au/news/Pages/20200329_01.aspx'
page = requests.get(URL)

soup = BeautifulSoup(page.content, 'html.parser')

results = soup.find('td', class_='moh-rteTableFooterOddCol-6')
if results and results.contents :
   print(int(results.contents[0].replace(',','')))

将来,当您不知道返回的对象的属性时,请使用__dict__对该对象进行解码

例如,

>> results.__dict__
{'attrs': {'class': ['moh-rteTableFooterOddCol-6']},
 'can_be_empty_element': False,
 'cdata_list_attributes': {'*': ['class', 'accesskey', 'dropzone'],
  'a': ['rel', 'rev'],
  'area': ['rel'],
  'form': ['accept-charset'],
  'icon': ['sizes'],
  'iframe': ['sandbox'],
  'link': ['rel', 'rev'],
  'object': ['archive'],
  'output': ['for'],
  'td': ['headers'],
  'th': ['headers']},
 'contents': ['93,099'],
 'hidden': False,
 'known_xml': False,
 'name': 'td',
 'namespace': None,
 'next_element': '93,099',
 'next_sibling': None,
 'parent': <tr class="moh-rteTableFooterRow-6"><td class="moh-rteTableFooterEvenCol-6">Total</td>
 <td class="moh-rteTableFooterOddCol-6">93,099</td></tr>,
 'parser_class': bs4.BeautifulSoup,
 'prefix': None,
 'preserve_whitespace_tags': {'pre', 'textarea'},
 'previous_element': '\n',
 'previous_sibling': '\n',
 'sourceline': 1075,
 'sourcepos': 0}

相关问题 更多 >