不停下脚步的乌龟 2020-10-02 12:35 采纳率: 75%
浏览 292

爬虫软件只能爬取网页前几也的数据，是被反爬了吗？

试了两款爬虫软件，翻页设置都没问题，运行后前5页都正常，爬取到第5页就停止运行了，这是我自己设置错误还是网页反爬了呀？

  • 写回答

1条回答 默认 最新

  • threenewbee 2020-10-02 13:32
    关注

    fiddler抓包看看。
    另外连续快速用浏览器访问网页，看看是否有验证码、报错等

    评论

报告相同问题？