我试试这个
.//div[@class='owl-wrapper']
在这个网站上
http://www.justproperty.com/search/uae/apartments/filter__cid/0/sort/score__desc/per_page/20/page/1
但是我得到了一个空的结果,尽管我可以在googlef12开发工具中看到它。你知道吗
您可能认为这是一个javascript调用,但这不是因为,我使用的是scrapy,我可以view
这样的响应:
scrapy shell ("website")
view(response)
那个班在那里。你知道吗
请帮帮我
使用view(response)的页面的Chrome屏幕截图
问题是:包含带有
owl-wrapper
类的div
元素的搜索结果是通过一个额外的GET请求异步加载的。你知道吗您需要在代码中模拟此请求,例如使用
requests
:印刷品:
基于上述解决方案的示例
Scrapy
spider:相关问题 更多 >
编程相关推荐