Urllib2：如何获取pag的内容

Question

我有一些网址：

http://www.avito.ru/ryazan/avtomobili?pmax=50000&f=188_893b13978
http://www.avito.ru/ryazan/avtomobili?pmax=50000&f=188_898b13978
http://www.avito.ru/ryazanskaya_oblast/avtomobili?pmax=50000&f=188_898b13978
http://www.avito.ru/ryazanskaya_oblast/avtomobili?pmax=50000&f=188_898b13978
http://www.avito.ru/ryazanskaya_oblast/avtomobili?pmax=100000&pmin=50000&f=188_898b13978

我试图获取此页的内容，但出现错误urllib2.URLError: <urlopen error [Errno 10060] 我使用代码 urllib2.urlopen(url).read() 我做错了什么？你知道吗

Answer 1

对我来说很好。我使用requests模块来获取页面。Pythonrequests更好。如果您没有安装requests模块，您可以通过pip install requests安装它

import requests

for url in urls: # if you are using a list to hold your urls
    r = requests.get(url)
    r.content # will display the entire page content

如果这也不起作用，最好检查代理连接。你知道吗