Python中文网 - 问答频道, 解决您学习工作中的Python难题和Bug
Python常见问题
使用scrapy，我尝试刮取一个searchencrypt url，如下所示：
https://www.searchencrypt.com/encsearch?q=box&d=search&ps=www
但它总是重定向到
https://www.searchencrypt.com/search?eq=Y8Ly0N6PX%2bPfTYAwJIXS%2bw%3d%3d&ett=5&ptc=://mail
它在浏览器中运行得非常好
我尝试了多种设置值的排列，如USER_AGENT、DOWNLOAD_DELAY、DEFAULT_REQUEST_HEADERS、CONCURRENT_REQUESTS、COOKIES_ENABLED、DOWNLOADER_CLIENT_TLS_METHOD、DNS_TIMEOUT等
你知道我可以用scrapy中的任何工作设置或选项来阻止它重定向吗
Tags： httpscomboxurlsearchwwwmail重定向
热门问题
- 我想从用户inpu创建一个类的实例
- 我想从用户导入值，为此
- 我想从用户那里得到一个整数输入，然后让for循环遍历该数字，然后调用一个函数多次
- 我想从用户那里收到一个列表，并在其中执行一些步骤，然后在步骤完成后将其打印回来，但它没有按照我想要的方式工作
- 我想从用户那里获取输入，并将值传递给（average=dict[x]/6），然后在那里获取resu
- 我想从第一个列表中展示第一个词，然后从第二个列表中展示十个词，以此类推- Python
- 我想从第一个空lin开始解析文本文件
- 我想从简历、简历中提取特定部分
- 我想从给定字典（python）的字符串中删除\u00a9、\u201d和类似的字符。
- 我想从给定的网站Lin下载许多文件扩展名相同的Wget或Python文件
- 我想从网上搜集一些关于抵押贷款的数据
- 我想从网站上删除电子邮件地址
- 我想从网站上读取数据该网站包含可下载的文件，然后我想用python脚本把它发送给oracle如何？
- 我想从网站中提取数据，然后将其显示在我的网页上
- 我想从网页上提取统计数据。
- 我想从网页上解析首都城市，并在用户输入国家时在终端上打印它们
- 我想从色彩图中删除前n个颜色，而不丢失原始颜色数
- 我想从课堂上打印字典里的键
- 我想从费用表中获取学生上次支付的费用，其中学生id=id
- 我想从较低的顺序对多重列表进行排序，但我无法在一行中生成结果
热门文章
- Python覆盖写入文件
- 怎样创建一个 Python 列表？
- Python3 List append()方法使用
- 派森语言
- Python List pop()方法
- Python Django Web典型模块开发实战
- Python input() 函数
- Python3 列表(list) clear()方法
- Python游戏编程入门
- 如何创建一个空的set?
- python如何定义(创建)一个字符串
- Python标准库 [The Python Standard Library by Ex
- Python网络数据爬取及分析从入门到精通（分析篇）
- Python3 for 循环语句
- Python List insert() 方法
- Python 字典(Dictionary) update()方法
- Python编程无师自通 专业程序员的养成
- Python3 List count()方法
- Python 网络爬虫实战 [Web Crawler With Python]
- Python Cookbook（第2版）中文版
如果清除该域的本地存储和Cookie，在浏览器中保持网络检查器打开，并访问URL，则在web浏览器显示内容之前，您将看到发生的所有请求和响应
找到包含所需实际数据的请求，签出其所有标头，找出它们是如何生成的（例如，从以前的请求接收到的数据，您必须在最后一个请求之前运行这些请求），并尝试为单个搜索URL模拟该工作流
相关问题 更多 >
编程相关推荐