y.2314 2024-09-02 19:53 采纳率: 33.3%
浏览 8

爬取动态页面获取不到数据

用selenium爬取动态页面，自动化操作进入下一个页面之后，为什么获取不到新的页面的信息，感觉似乎brower还是停留在上个页面的信息上，用xpath解析新页面的数据的时候返回的永远是空列表。请问该如何解决这个问题？或者说还有什么简便一些的爬取动态页面的方法吗（比如我要先登录某个网站再进行爬取该怎么编写代码）？

  • 写回答

1条回答 默认 最新

  • Zha_ao 2024-09-02 22:16
    关注

    自动请求进入下一个页面，好像需要用page_source进行源代码提取吧然后用提取到的源代码进行解析吧

    评论

报告相同问题？

问题事件

  • 创建了问题 9月2日

悬赏问题

  • ¥15 如何在vue.config.js中读取到public文件夹下window.APP_CONFIG.API_BASE_URL的值
  • ¥50 浦育平台scratch图形化编程
  • ¥20 求这个的原理图 只要原理图
  • ¥15 vue2项目中，如何配置环境，可以在打完包之后修改请求的服务器地址
  • ¥20 微信的店铺小程序如何修改背景图
  • ¥15 UE5.1局部变量对蓝图不可见
  • ¥15 一共有五道问题关于整数幂的运算还有房间号码 还有网络密码的解答？(语言-python)
  • ¥20 sentry如何捕获上传Android ndk 崩溃
  • ¥15 在做logistic回归模型限制性立方条图时候，不能出完整图的困难
  • ¥15 G0系列单片机HAL库中景园gc9307液晶驱动芯片无法使用硬件SPI+DMA驱动，如何解决？