青柠染词笺 2021-09-30 17:40 采纳率: 50%
浏览 954
已结题

python爬虫关于xpath提取出来为空列表的问题

img


如上图，理论上是能提取出来文字的

img

但是，提取出来是空列表
对了，还有一个问题就是为什么有些会显示这个：<Element html at 0x1b580c10d08>
之前爬小说图片什么的，都是显示html的内容
我百度上去找方法都不行，因为我的列表都是空值

  • 写回答

2条回答 默认 最新

  • CSDN专家-天际的海浪 2021-09-30 22:43
    关注

    你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。
    requests只能获取网页的静态源代码，动态更新的内容取不到。
    对于动态更新的内容要用selenium 来爬取。

    或者是通过F12控制台分析页面数据加载的链接，找到真正json数据的地址进行爬取。

    在页面上点击右键，右键菜单中选 "查看网页源代码"。

    img


    这样看到的才是网页的静态源代码。
    如果这个网页的静态源代码中有你需要爬取的内容，就说明该页面没有动态内容，可以用requests爬取。
    否则就说明该页面的内容是动态更新的，要用selenium 来爬取.

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题？

问题事件

  • 系统已结题 10月16日
  • 已采纳回答 10月8日
  • 创建了问题 9月30日

悬赏问题

  • ¥15 metadata提取的PDF元数据，如何转换为一个Excel
  • ¥15 关于arduino编程toCharArray()函数的使用
  • ¥100 vc++混合CEF采用CLR方式编译报错
  • ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误，如何解决？
  • ¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
  • ¥15 c#逐行读取txt文本，但是每一行里面数据之间空格数量不同
  • ¥50 如何openEuler 22.03上安装配置drbd
  • ¥20 ING91680C BLE5.3 芯片怎么实现串口收发数据
  • ¥15 无线连接树莓派，无法执行update，如何解决？（相关搜索：软件下载）
  • ¥15 Windows11, backspace, enter, space键失灵