在做爬虫时cookie问题，地址重定向获取不到cookie

图片说明
如图，我在做爬虫得时候前面登陆验证可以正常访问，但是访问第四个地址的时候正常应该给我返回cookie 我才能用返回得cookie去访问第五次地址。
图片是我fiddler抓包信息第五次访问的时候不是在第四次response里获取得cookie信息我该如何获取这个cookie ，只有拿到正确的cookie我才能通过第五次访问取到正常数据。

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

5条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
a448103714 2018-08-16 01:16
关注
第一张是第四次请求的response信息，第二张是第五次请求的request信息

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

selenium获取不到cookie python selenium 有问必答爬虫
2022-04-08 14:21

回答 1 已采纳 print(self.driver.get_cookies())这样试试
爬虫xpath获取不到数据 python 爬虫
2022-12-12 01:38

回答 2 已采纳数据有可能是动态加载的，你没有爬到，先打印整个页面内容，搜索一下看有没有你需要的内容，没有的话，那内容就是动态加载的，request肯定爬取不到，那xpath肯定就提取不了呗！1.对于动态加载的数据，
python爬虫问题，在网页代码找不到自己想要的数据 python 爬虫
2022-02-24 11:15

回答 2 已采纳那个网站啊.你看下是不是写在接口中.F12开发者模式.选择XHR看下
python重定向cookie_python urllib2 重定向时获取cookie
2020-11-29 09:35

weixin_39556811的博客最近用python写一个简单的爬虫，在模拟网站登录时遇到问题，就是登录后紧跟着302重定向，这时候cookie获取没做好，就会登录失败。网上找了很多文章，可能是因为python版本不同之类的原因吧，很多方法试了都没用。...
爬虫csv获取不到全部数据 python selenium 爬虫
2022-12-24 13:06

回答 2 已采纳 #这样可以拿到所有商品 for i in res.find_all('span',{'class':{'text'}}): d=i.text lst.append(d)
关于爬虫cookie相关问题 python
2022-04-13 13:25

回答 3 已采纳既然你写的是爬虫，那你就把拿到cookie的方式分析然后模拟一遍，比如登陆
爬虫抓取XHR文件，获取不到响应的数据 python 爬虫
2022-08-10 16:45

回答 2 已采纳你确定你的那一大串数据都是params的吗？应该是data的，或者json的吧，post方法里面有params，但是一般不是这个格式的，你的这些里面是内嵌的，params不是这样的，如果改了以后还不行
python 模拟登录被重定向 获取不到cookie问题
2019-06-20 13:09

写Bug 的大潘的博客在requests请求时加入参数 allow_redirects=False 即可 res = requests.post(url_login,headers=headers,data=from_data,allow_redirects=False)
python爬虫html获取不全 html python 爬虫
2022-06-24 19:43

回答 1 已采纳其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载，其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
关于#python#的问题：模拟登陆后能获取到cookie，就是cookie一天就过期 java python 爬虫
2021-08-12 15:12

回答 1 已采纳间隔一段时间做一些操作的请求，刷新cookie剩余存活时间
关于#python#的问题：python爬虫发送请求时添加cookie过长导致报错 python 爬虫
2022-08-25 15:41

回答 3 已采纳这并不是过长导致的，这是格式错误，参考下面步骤，不用一个一个手写参数，直接生成所有请求参数代码就不会报这种错误了：浏览器抓包找到该请求，右键复制-->以cULR格式复制到https://spi
python重定向cookie,Python请求：如何从302重定向获取响应cookie
2020-11-29 09:35

weixin_39649611的博客 print(s.cookies) So this works and will carry out the given request, the only thing is, the authorization line will only get the '_pikore_session' cookie, but not the token cookie, which I want to get...
爬虫为什么cookie报错爬虫
2022-03-15 15:23

回答 1 已采纳 user-agent末尾缺一个逗号
java 爬虫cookie_爬虫中获取cookie的方式
2021-02-12 20:53

weixin_39631295的博客因为有的页面爬取的时候，需要登录后才能爬，比如知乎，如何判断一个页面是否已经登录，通过判断是否含有cookies就可以，我们获取到cookie后就可以携带cookie来访问需要登录后的页面了。方式一使用session这里的...
获取网页302登录重定向cookie的值
2021-07-29 08:27

宣小飞的博客获取网页302登录重定向cookie的值 import json import requests # 获取重定向的cookie值 def get_cookies(url, username, password): url = url s = requests.session() data = { 'username': username, '...
没有解决我的问题, 去提问

悬赏问题

¥15 微信会员卡接入微信支付商户号收款
¥15 如何获取烟草零售终端数据
¥15 数学建模招标中位数问题
¥15 phython路径名过长报错不知道什么问题
¥15 深度学习中模型转换该怎么实现
¥15 HLs设计手写数字识别程序编译通不过
¥15 Stata外部命令安装问题求帮助！
¥15 从键盘随机输入A-H中的一串字符串，用七段数码管方法进行绘制。提交代码及运行截图。
¥15 TYPCE母转母，插入认方向
¥15 如何用python向钉钉机器人发送可以放大的图片？