hange1991 2023-02-09 11:15 采纳率: 90.9%
浏览 30
已结题

网页下翻之后产生新内容，如何实现连续抓包

如图所示，右侧只包含了左侧的前19个视频信息，而我想要获取全部的一百多个视频的信息。随着左侧网页的下拉，会出现新的视频，并出现新的类似的包，同样包含十几个视频信息，但是两个包的URL没有什么规律。可以通过什么方法把这些包都抓出来吗？只能一个一个手动抓包吗？

img

  • 写回答

1条回答 默认 最新

  • 北海 2023-02-09 11:21
    关注

    这种一般是通过分页实现的，你看看请求参数里有没有类似 page: 1 这样的键值对，这个就是控制请求哪一页的
    然后改变这个值，循环请求就可以把全部的视频拿到了

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

问题事件

  • 已结题 （查看结题原因） 2月13日
  • 已采纳回答 2月10日
  • 创建了问题 2月9日

悬赏问题

  • ¥60 求一个简单的网页(标签-安全|关键词-上传)
  • ¥35 lstm时间序列共享单车预测，loss值优化，参数优化算法
  • ¥15 基于卷积神经网络的声纹识别
  • ¥15 Python中的request，如何使用ssr节点，通过代理requests网页。本人在泰国，需要用大陆ip才能玩网页游戏，合法合规。
  • ¥100 为什么这个恒流源电路不能恒流？
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson，入参实体类Person，出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题，上传的坐标文件里是怎么对无序点进行编号的，以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图