teddy_is_bear 2023-11-14 12:43 采纳率: 50%
浏览 8

来爬虫大lao看看这个问题怎么解决

开了多个脚本爬取数据的时候遇到状态码206,获取不到数据,我写的请求间隔设置在3-5秒,请求的url是api接口。
用开发者工具查看发现接口206的时候 ,主页面会弹出验证码,划过去之后才会重新返回一次数据

img

img


根据搜的资料都是说请求头加range字段,返回响应会有range范围,但是我这也没有

img

负责人要求我开12个脚本同时爬取不同时间段的数据,但是多开会遇到206,每次要等三个小时才能恢复 重新返回200

  • 写回答

2条回答 默认 最新

  • cjh4312 2023-11-14 13:18
    关注

    爬啥数据?为啥多脚本,不用多线程呢

    评论

报告相同问题?

问题事件

  • 创建了问题 11月14日

悬赏问题

  • ¥15 程序实在不会写,要秃了
  • ¥15 pycharm导入不了自己的包
  • ¥15 C#.net通过内网url地址获取文件并下载问题,浏览器postman可以正常下载,用程序不行
  • ¥15 本人本科机械,目前研一。没有深度学习基础,目前对研究生课题一片迷茫,请教各位!
  • ¥15 关于R语言单因素与多因素线性回归的平均值
  • ¥15 服务器清除BIOS之后引导不了
  • ¥15 CPLEX用OPL编写的混合整数线性优化问题。
  • ¥15 可以用EasyConnect连接实验室内网,但无法连接内网才能访问的服务器,为什么?
  • ¥15 前端预览docx文件,文件从后端传送过来。
  • ¥15 层次聚类和蛋白质相似度