不总是遵循Scrapy请求对象 我正在用scraper创建一个爬虫。 我的蜘蛛必须去开始页,其中包含了一个链接列表和下一页的链接。 然后,它必须跟随每个链接,转到这个链接,获取信息并返回主页。 最后,当spider跟踪页面的每个链 ...2024-09-30 已阅读: n次