m0_57965808 2021-10-20 21:00 采纳率: 90.9%
浏览 17
已结题

爬取网站发现网站的数据量不对

标题其实描述的不准确,其实是我在试着爬取某文库,在写之前粗略计算了一下它包含的文档的量,发现就它明面上标出来的量不过12万左右,未免太少了。想知道剩下的量该怎么爬取?

img

  • 写回答

1条回答 默认 最新

  • CSDN专家-HGJ 2021-10-20 21:05
    关注

    有数据链接,有效请求才能获取数据,剩下的数据你也需要借助浏览器开发者工具去分析数据加载方式,参数传递要求等。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 10月29日
  • 已采纳回答 10月21日
  • 创建了问题 10月20日

悬赏问题

  • ¥15 nslt的可用模型,或者其他可以进行推理的现有模型
  • ¥15 arduino上连sim900a实现连接mqtt服务器
  • ¥15 vncviewer7.0安装后如何正确注册License许可证,激活使用
  • ¥15 phython如何实现以下功能?查找同一用户名的消费金额合并2
  • ¥66 关于人体营养与饮食规划的线性规划模型
  • ¥15 基于深度学习的快递面单识别系统
  • ¥15 Multisim仿真设计地铁到站提醒电路
  • ¥15 怎么用一个500W电源给5台60W的电脑供电
  • ¥15 请推荐一个轻量级规则引擎,配合流程引擎使用,规则引擎负责判断出符合规则的流程引擎模板id
  • ¥15 Excel表只有年月怎么计算年龄