一些预定义的网络爬虫
RunSpiders的Python项目详细描述
python库包含一些预定义的web爬虫程序。 注意:由于相关的网站更新,此包可能无法正常工作。 如果发生这种情况,就自己解决。
安装
pip install RunSpiders
示例
新颖
请安装calibre并将电子书convert添加到环境变量中。
fromRunSpidersimportNovelSpiderspider=NovelSpider()spider.download_books(['***',...])# spider.download_books(['***', ...], style="recipe_first")
电影
请安装ffmpeg并将其添加到环境变量中。
fromRunSpidersimportM3U8Spiderspider=M3U8Spider(output="F\movies")spider.download_movies([(m3u8_url,file_name),...])