crazy Diamonds 2023-04-27 22:49 采纳率: 0%
浏览 111
已结题

如何解决爬某网站爬个40或50个就返回404了?

user-agent设置了,sleep也是随机的值,我总共大概要爬一万多条数据,这什么时候才爬的完,有师傅指点一下吗?

  • 写回答

6条回答 默认 最新

  • 码诅 2023-04-27 23:02
    关注

    sleep久一点,伪装一下IP地址

    评论

报告相同问题?

问题事件

  • 系统已结题 5月5日
  • 创建了问题 4月27日

悬赏问题

  • ¥15 请问这个代码哪里有问题啊
  • ¥15 通过GaussianView进行结构微调消除虚频
  • ¥15 调用transformers库
  • ¥15 由于导出的数据名字中带有/,导致Matlab打不开,怎么办?
  • ¥15 新硬盘安装的程序总是崩溃,提示遇到错误
  • ¥15 openpcdet自制数据集评估bev精度和3d精度相同
  • ¥15 excel 上下按钮 显示行
  • ¥20 云卓h12pro 数传问题
  • ¥20 请问有人知道怎么用工艺库里面的sdb文件通过virtuoso导出来library里面每个cell的symbol吗?
  • ¥20 海思 nnie 编译 报错