2024-09-30 20:19:51 发布
网友
我想让斯帕奇通过代理,但没有成功。在
我传递给请求元代理,如下所示:
http://zqal.xyz http://pro6y.com http://fermatfibonacci.info http://newproxy.ninja etc.
当我通过shell输入一些随机页面时,显示的页面不是我传递的页面,而是代理页面。看起来我去了代理页面,不是通过代理。。。在
可能代理链接错误?有什么主意吗?在
我正在设置用户代理喜欢我的网页浏览器,并参考谷歌网页。在
您可以使用自动旋转代理的废库https://github.com/TeamHG-Memex/scrapy-rotating-proxies来解决这个问题。如果您想要一个关于如何自动执行此操作的完整教程(结合获取代理列表),您可以在这里找到完整的教程:https://tinyendian.com/articles/how-to-scrape-the-web-and-not-get-caught
您可以使用自动旋转代理的废库https://github.com/TeamHG-Memex/scrapy-rotating-proxies来解决这个问题。如果您想要一个关于如何自动执行此操作的完整教程(结合获取代理列表),您可以在这里找到完整的教程:https://tinyendian.com/articles/how-to-scrape-the-web-and-not-get-caught
相关问题 更多 >
编程相关推荐