Nasy Crawler框架——从未有过如此纯粹的Crawler。

nacf的Python项目详细描述


目录

Prologue

Never had such a pure crawler like this ^{}.

Although I often write crawlers, I don’t like to use huge frameworks, such as scrapy, but prefer simple ^{} or more general ^{}. However, these two are inconvenient for a crawler. E.g. Places, such as error retrying or parallel crawling, need to be handwritten by myself. It is not very difficult to write it while writing too much can be tedious. Hence I started writing this nacf (Nasy Crawler Framework), hoping to simplify some error retrying or parallel writing of crawlers.

Packages

^{tb 1}$

Usage

see tests

开发过程

完成http函数

关闭:<;2019年2月28日星期四20:51:00>;

完成获取

关闭:<;12月25日星期二17:36:00 2018>;

完成时间

关闭:<;2019年2月28日星期四20:44:00>;

完成错误

关闭:<;2019年2月28日星期四20:51:00>;

完成修复inspect.parameter中导致函数并行关闭的错误。:错误:1:

已关闭:<;2018年12月26日星期三20:26:00>;

下一个文档

下次使用

epoligue

历史记录

版本1.0.2

版本1.0.1

版本1.0.0

版本0.1.2

版本0.1.1

版本0.1.0

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java如何将文件的行号转换为字节偏移量(或使用BufferedReader获取每行开头的字节偏移量)?   java将RGB转换为HSV   多线程在并行线程中运行不同的事件类型,在java中按顺序运行相同的事件类型   AbstractJavaSamplerClient的java Jmeter多采样器结果   多线程Java CompletableFuture。运行异步递归。。。有潜在的风险吗?   JAVA尼奥。file Java读取文件名并按升序存储   使用会话和cookie的Javaservlet身份验证   正则表达式java Matcher删除一些字符   尝试在自定义ListView适配器中启动活动时发生java AndroidRuntimeException   利用JPA命名查询的java   java是否正确地将名称和级别存储到数组?   java哪个更快?双[][]矩阵或ArrayList<ArrayList<double>>   不允许使用java Android动画字符串类型   MessageDigest中字符串的java哈希错误   如何替换Java中第一次出现的字符串   java如何使用在Log4j中启用调试。属性文件和maven?   @Scheduled中的java Spring会话作用域对象   当Android中的应用程序配置发生变化时,java Chronometer将重置为开启状态   java hibernate本机查询变量