擅长:python、mysql、java
<p>我有同样的要求,找到了<a href="https://requests-cache.readthedocs.org/en/latest/" rel="nofollow">requests-cache</a>。添加它非常容易,因为它扩展了<code>requests</code>。您可以将缓存保存在内存中并在脚本结束后消失,也可以使用sqlite、mongodb或redis使其持久化。这是我写的两行字,和广告上说的一样:</p>
<pre><code>import requests, requests_cache
requests_cache.install_cache('scraper_cache', backend='sqlite', expire_after=3600)
</code></pre>