一个很好的python web用户代理

2024-10-01 02:21:37 发布

您现在位置:Python中文网/ 问答频道 /正文

我在做一个python爬虫,我在想一个用户代理。在

有人能想到用户代理吗。在

或者有人有什么计划吗

我喜欢“urllib(兼容;owibot+owi.tk/机器人)(这是谷歌机器人重写的)。在

有人能帮我吗


Tags: 用户代理机器人urllib爬虫tk计划owi
1条回答
网友
1楼 · 发布于 2024-10-01 02:21:37

就编一个吧。如果你的机器人做错了什么/坏的/愚蠢的/好的,就可以联系你。规范在RFC2616秒内。14.43(HTTP/1.1)。在

请不要只是抄东西!在

另外,some practical stuff learned在对Stackoverflow和好友进行爬网时发现错误链接:

From day 0 set yourself up with a proper User Agent String.

相关问题 更多 >