2024-06-26 02:00:08 发布
网友
我想获取不同域下的网页,这意味着我必须在“scrapy crawl myspider”命令下使用不同的蜘蛛。但是,由于web页面的内容不同,我不得不使用不同的管道逻辑将数据放入数据库。但是对于每一个蜘蛛,它们必须通过settings.py中定义的所有管道。有没有其他优雅的方法来为每个蜘蛛使用单独的管道?
目前没有回答
目前没有回答
相关问题 更多 >
编程相关推荐