Python中文网 - 问答频道, 解决您学习工作中的Python难题和Bug
Python常见问题
我对网络抓取有点陌生，我的问题可能有点傻。我想从租赁网站上获取信息。我想每天刮取将近2000页来获取信息。但我不想重击他们的网站。我只需要一个特定的标签里面的信息，这是一个表。有没有办法只请求页面的那一部分而不是获取整个页面
我肯定会在脚本中添加延迟和睡眠，但减小文件大小也会有所帮助。 实现这一点将把请求的文件大小从大约300kB减少到11kB
网站网址：https://asunnot.oikotie.fi/vuokrattavat-asunnot
网页示例：https://asunnot.oikotie.fi/vuokrattavat-asunnot/imatra/15733776
必需的标记：<div class="listing-details-container">...</div>
感谢您提前回复：）
Tags： https网络div脚本信息网站页面标签
热门问题
- 如何合并多个PDF文件？
- 如何合并多个xarray数据变量及其坐标？
- 如何合并多个列中具有重复值的行
- 如何合并多个唯一id
- 如何合并多个图纸并使用图纸名称的名称重命名列名？
- 如何合并多个字典并添加同一个键的值？（Python）
- 如何合并多个搜索结果文件（pkl）以将它们全部打印在一起？
- 如何合并多个数据帧
- 如何合并多个数据帧并使用Pandas为假人添加列？
- 如何合并多个数据帧并按时间戳排序
- 如何合并多个数据帧的列表并用另一个lis标记每列
- 如何合并多个数据框中的列
- 如何合并多个文件？
- 如何合并多个查询集？
- 如何合并多个绘图？
- 如何合并多个词典
- 如何合并多个输入数据集（数据帧）？
- 如何合并多条记录中拆分的文本行
- 如何合并多索引列datafram
- 如何合并多级（即多索引）数据帧？
热门文章
- Python覆盖写入文件
- 怎样创建一个 Python 列表？
- Python3 List append()方法使用
- 派森语言
- Python List pop()方法
- Python Django Web典型模块开发实战
- Python input() 函数
- Python3 列表(list) clear()方法
- Python游戏编程入门
- 如何创建一个空的set?
- python如何定义(创建)一个字符串
- Python标准库 [The Python Standard Library by Ex
- Python网络数据爬取及分析从入门到精通（分析篇）
- Python3 for 循环语句
- Python List insert() 方法
- Python 字典(Dictionary) update()方法
- Python编程无师自通 专业程序员的养成
- Python3 List count()方法
- Python 网络爬虫实战 [Web Crawler With Python]
- Python Cookbook（第2版）中文版
我认为每天2000英镑并不高——这取决于你什么时候做。如果您在每个请求之间放置10秒的等待时间，则不应使其过载，但需要6小时。 当网站应该比较安静的时候，晚上做可能会更好。 如果你不等待2000年，网站所有者可能会不高兴
相关问题 更多 >
编程相关推荐