垃圾爬虫没有看到任何项目被刮。我有兴趣从我的数据库中拉出一些网址,以便在我下次重新爬网时先进行爬网。在 我已经为此编写了一个自定义中间件,但是由于JOBDIR的一个错误,我无法使用自定义中间件实现我想要的(检查线程here) 所以 ...2024-10-06 已阅读: n次