擅长:python、mysql、java
<p>您不必更改请求,只需在spider中执行Selenium即可。你知道吗</p>
<pre><code>def parse(self, response):
browser = webdriver.Firefox()
for i in response.xpath("//a/@href").extract():
browser.get(i)
#then do other stuff
</code></pre>
<p>但根据我的经验,只有极少数的事情你不能单独用scrapy来做。
你有一个链接显示什么样的东西,你正在寻找?你知道吗</p>