为什么？urllib.urlopen.read（）与源代码不对应？

Question

我正在尝试获取以下网页：

import urllib
urllib.urlopen("http://www.gallimard-jeunesse.fr/searchjeunesse/advanced/(order)/author?catalog[0]=1&SearchAction=1").read()

结果与我在使用googlechrome检查网页源代码时看到的结果不符。在

你能告诉我为什么会发生这种情况，以及我如何改进代码来克服这个问题吗？在

谢谢你的帮助。在

Answer 1

您可以在Firefox中使用Selenium来解决这个问题，但在很多情况下，它可能并不适合，因为每次运行代码时都会弹出浏览器。另一个想法是使用像PhantomJS一样的无头broswer。在

最好的方法是使用mechanize库。通过pip安装机械化。在

pip install mechanize

然后可以使用以下代码：

^{pr2}$

它还提供了睡眠和执行脚本的选项。你可以在documentation.中阅读它们