如何在使用selenium进行刮削时单击另一节中的同一按钮

Question

因此，我正在使用selenium进行抓取，我想单击“防御”部分中的“下一步”按钮，但我编写的代码在“摘要”中单击了“下一步”。你知道吗

以下是供您尝试的url：

https://www.whoscored.com/Regions/252/Tournaments/2/Seasons/7361/Stages/16368/PlayerStatistics/England-Premier-League-2018-2019

所以它选择了“防御”，我可以在窗口中看到它被选中，但是下一页没有出现。单击“摘要”我发现下一个函数实际上正在那里发生。你知道吗

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

browser= webdriver.Chrome(executable_path ="C:\Program Files (x86)\Google\Chrome\chromedriver.exe") 
browser.get('https://www.whoscored.com/Regions/252/Tournaments/2/Seasons/7361/Stages/16368/PlayerStatistics/England-Premier-League-2018-2019')


browser.find_element_by_xpath("""//*[@id="stage-top-player-stats-options"]/li[2]/a""").click()

element = WebDriverWait(browser, 20).until(EC.presence_of_element_located((By.XPATH, """//*[@id="next"]""")))
browser.execute_script("arguments[0].click();", element)

Answer 1

xpath for next按钮对此页不是唯一的。试试这个

element = WebDriverWait(browser, 20).until(EC.presence_of_element_located((By.XPATH, "//*[@id='stage-top-player-stats-defensive']//a[@id='next']")))
browser.execute_script("arguments[0].click();", element)

或者

element = WebDriverWait(browser, 20).until(EC.presence_of_element_located((By.XPATH, "//*[@id='stage-top-player-stats-defensive']//a[@id='next']")))
element.click()