一个http和ftp并行文件下载程序。

parfive的Python项目详细描述


Latest PyPI version

使用asyncio的并行文件下载程序。

用法

parfive的工作原理是创建一个downloader对象,将文件附加到该对象,然后 正在运行下载。parfive有一个同步api,但使用asyncio 并行下载文件。

一个简单的例子是:

from parfive import Downloader

dl = Downloader()

dl.enqueue_file("http://data.sunpy.org/sample-data/predicted-sunspot-radio-flux.txt", path="./")

files = dl.download()

结果

parfive.Downloader.download返回一个parfive.Results对象,它是 已下载的文件名列表。它还跟踪任何 下载失败。

处理错误

如果文件下载失败,则存储来自服务器的url和响应 在由parfive.Downloader返回的Results对象中。这些可以用来 通知用户错误。(注意,进度条将在 不完整状态如果下载失败,即它将显示4/5 Files Downloaded)。

Results对象是具有额外属性errors的列表,此属性 返回命名元组的列表,其中这些命名元组包含.url 以及.response,它是aiohttp.ClientResponseaiohttp.ClientError对象。

安装

parfive在pypi上可用,您可以使用pip安装它:

pip install parfive

或者如果您想使用ftp下载:

pip install parfive[ftp]

要求

  • Python3.5+
  • aiohttp
  • 全面质量管理
  • aioftp(用于通过ftp下载)

许可证

麻省理工学院授权

作者

第五段是由Stuart Mumford写的。

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
是否可以将Ghost CMS与Spring Boot(Java)一起使用?如果没有,还有好的选择吗?   java简单XML框架解析器在Android中发布XML解析   java如何将数组列表设置为listview中的图像视图   java从JPA查找GUI   java为什么XSSFWorksheet的getName()不起作用?   java为什么Eclipse不记得我的启动配置?   使用java处理Json API响应   调用AlertDialog。按下后退按钮时Android片段的Java生成器   在Android中以编程方式选择项目ListView   java交错网格布局用于从实时数据库加载图像,不显示   java如何找到测试套件。Testng中的xml执行状态   java如何使用Appium通过selenium找到警报对话框?   java如何避免使用Johann的   学生编辑不起作用(Java+Spring+MySQl)?   EclipseMilo中的java身份验证clientserver   java Solr DIH获取大小无效   j_安全检查上的java筛选器不工作。Glassfish V3 Netbeans 6.8