擅长:python、mysql、java
<p>shark3y声明<a href="https://stackoverflow.com/a/31846793/3941341">in his answer</a>,<code>start_url</code>会被重定向到主页面。你知道吗</p>
<p>如果您阅读了文档,您应该知道Scrapy是从<code>start_url</code>开始刮的,它不知道您想要实现什么。你知道吗</p>
<p>在您的例子中,您需要从<code>http://www.fali.org/search/newsearch.asp</code>开始,它返回所有成员的搜索结果。现在您可以设置一个<code>Rule</code>来遍历结果列表,并为找到的每个成员调用一个<code>parse_detail</code>方法,并通过结果分页跟踪链接。你知道吗</p>
<p>在<code>parse_detail</code>方法中,您可以遍历成员的站点并提取所需的所有信息。我猜你不需要整个网站,因为它会在你的计算机上生成大量数据,最后你必须解析它。你知道吗</p>