擅长:python、mysql、java
<p>在下一个获取数据的函数中,检查response==200。
如果响应不等于200,则可以在特定限制下使用retry变量,使用另一个函数重试该url。如果超过了限制,请转到下一个产品url。你知道吗</p>
<pre><code>try:
if response.status == 404:
self.append(self.bad_log_file, response.url)
self.append(self.fourohfour, response.url)
elif response.status == 200:
self.append(self.ok_log_file, response.url)
else:
self.append(self.bad_log_file, response.url)
except Exception, e:
self.log('[eccezione] : %s' % e)
pass
</code></pre>