OscrapyCookieCutter自动生成

os-scrapy-random-useragent的Python项目详细描述


OScrapy随机用户代理

Build StatuscodecovPyPI - Python VersionPyPI

此项目提供一个Downloader Middleware来更改请求头的“用户代理”。在

安装

pip install os-scrapy-random-useragent

使用

设置

  • 在中启用下载中间件设置.py文件:

    这个中间件将覆盖默认的Scrapy用户代理

    ^{pr2}$ 在
  • 配置用户代理:

    • 按文件:

      USER_AGENTS = "./your-useragets-file"
      
    • 按字符串:

      USER_AGENTS = "Your-Useragent-String"
      
    • 按列表:

      USER_AGENTS = ["User-Agent-01", "User-Agent-02"]
      

单元测试

tox

许可证

麻省理工学院授权。在

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java使用无循环和乘法的递归调用查找值   java字符串大小冲突   在一组Java文件对象中查找唯一的超级目录   没有Eclipse控制台输出窗口(Java)?   java这怎么等于105而不是15?   java Adempiere列调出,用于不处理从(代码)选项导入和创建行的字段   java tomcat、2个webapps、2个log4js,但这两个应用都记录到一个文件中   lambda理解Java谓词   HotspotFX上的Java EOF问题   java google应用程序引擎:如何向连接/断开通道“ping”添加信息?   java如何使用VTDXML获取一个元素的所有名称空间声明?   java如何使用drawLine()获得一条线以随机方向拍摄?   java transactionManager应该使用哪个SessionFactory?   java在安卓上播放声音   在Mac上使用JBDC对SQL Server进行java Windows身份验证   java基本列表和字符串[]   java NamedParameterJdbcTemplate从中选择*   扩展上的java Android可扩展列表视图   使用ApacheAxis2的java SOAP附件