尝试使用selenium来webscrape ncbi时，数据不会加载，也不会包含在具有我可以等待的ID的元素中
回答此问题可获得 20 贡献值，回答如果被采纳可获得 50 分。
<p>我正试图从像<a href="https://www.ncbi.nlm.nih.gov//nuccore/KC208619.1?report=fasta" rel="nofollow noreferrer">https://www.ncbi.nlm.nih.gov//nuccore/KC208619.1?report=fasta</a>这样的网页上搜集基因数据</p>
<p>我用的是漂亮的汤和硒</p>
<p>数据位于id为viewercontent1的元素内。
当我用这个代码打印出来时：</p>
<pre><code>from bs4 import BeautifulSoup
import requests
from selenium import webdriver
from selenium.webdriver.support.ui import WebDriverWait
import re
secondDriver = webdriver.Chrome(executable_path='/Users/me/Documents/chloroPlastGenScrape/chromedriver')
newLink = "https://www.ncbi.nlm.nih.gov//nuccore/KC208619.1?report=fasta"
secondDriver.implicitly_wait(10)
WebDriverWait(secondDriver, 10).until(lambda driver: driver.execute_script('return document.readyState') == 'complete')
secondDriver.get(newLink)
html2 = secondDriver.page_source
subSoup = BeautifulSoup(html2, 'html.parser')
viewercontent1 = subSoup.findAll("div", {"id" : "viewercontent1"})[0]
print(viewercontent1)
</code></pre>
<p>我打印：</p>
<pre><code><div class="seq gbff" id="viewercontent1" sequencesize="450826" style="display: block;" val="426261815" virtualsequence=""><div class="loading">Loading ... <img alt="record loading animation" src="/core/extjs/ext-2.1/resources/images/default/grid/loading.gif"/></div></div>
</code></pre>
<p>内容似乎还没有加载完毕。
我尝试隐式地等待和检查内容是否已加载（在调用.get（）函数之前和之后），但这似乎没有起到任何作用。
我不能等待内容通过ID（元素的位置）加载，因为数据直接包含在ID为on的<code><pre></pre></code>元素中</p>
<p>任何帮助都将不胜感激</p>
请先 登录 后评论
针对此问题: 更多的回答
- 89 关注
- 1 收藏，216 浏览
- 网友 提问于 2天前
相关Python问题
- 如何添加虚拟方法 1 回答
- 如何添加表示整数的擦边字符串？ 5 回答
- 如何添加要在Bokeh中使用的新font.ttf文件？ 2 回答
- 如何添加要显示的矩阵XY轴编号和XY轴 10 回答
- 如何添加计数？ 5 回答
- 如何添加计数器函数？ 4 回答
- 如何添加计数器列来计算数据帧中另一列中的特定值？ 9 回答
- 如何添加计数器来跟踪while循环中的月份和年份？ 8 回答
- 如何添加计数并删除countplot的顶部和右侧脊椎？ 2 回答
- 如何添加计时器wx.应用程序更新窗口对象的主循环？ 9 回答
- 如何添加评论到帖子？PostDetailVew，Django 2.1.5 3 回答
- 如何添加评论拉梅尔亚姆 7 回答
- 如何添加诸如矩阵Python/Pandas之类的数据帧？ 4 回答
- 如何添加谷歌地点自动完成到Flask？ 2 回答
- 如何添加超时、python discord bot 2 回答
- 如何添加超过1dp的检查 5 回答
- 如何添加距离方法 7 回答
- 如何添加跟随游戏的敌人精灵 3 回答
- 如何添加路径以便python可以找到程序？ 1 回答
- 如何添加身份验证/安全性以使用happybase访问HBase？ 4 回答
