scrapy proxychraw代理中间件:scrapy的proxychraw接口中间件

scrapy-proxycrawl-middleware的Python项目详细描述


Scrapy的ProxyCrawl API中间件

使用带有普通令牌或javascript令牌的ProxyCrawl服务处理Scrapy请求

安装

选择安装方式:

  • 在您的scrapy项目中克隆存储库并运行以下命令:
python setup.py install
  • 或者使用PyPipython包管理器。pip install scrapy-proxycrawl-middleware

然后在剪贴簿中settings.py添加以下行:

# Activate the middlewarePROXYCRAWL_ENABLED=True# The ProxyCrawl API token you wish to use, either normal of javascript tokenPROXYCRAWL_TOKEN='your token'# Enable the middlewareDOWNLOADER_MIDDLEWARES={'scrapy_proxycrawl.ProxyCrawlMiddleware':610}

如果您有问题或需要使用库的帮助,请打开一个问题或contact us


2019 ProxyCrawl版权所有

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
有没有一种简单的方法可以从Java中相同接口的多个实现中创建级联函数?   活动MQ和Amazon MQ之间的java差异   java如何在使用来自webfront的jackson配对json字符串时忽略无效值并设置空值?   java如何确定JMock模拟对象正在模拟哪个类?   java Tarjan的周期检测:缺少周期   JRadioButton名称的名称空间Java操作侦听器   安卓我可以读取Java中嵌套的公共静态抽象类中的公共静态final字段吗   即使终端配置正确,Java也无法显示Unicode字符   java如何使用JPA条件查询编写此查询?   需要帮助为这个Java程序开发一个合适的打印方法吗   图片哪里可以找到java ImageIo源代码?   java正则表达式查找方法调用   java组织。jvnet。哈德逊。测验JellyTestSuiteBuilder$JellyTestSuite异常:不兼容ClassChangeError:实现类   从div到PDF?JavaEE、jQuery、PGSQL   JVM(Java虚拟机)是一种抽象机器。   spring如何使用用户名和密码来构建URL,以使用基本Java身份验证访问RESTAPI?   java合并2个链表   使用ServerSocket引发java ConnectException   java IBM JMS MQ在MQM头中添加用户ID