林钟楚 2024-01-05 18:37 采纳率: 0%
浏览 11

八爪鱼数据爬取过程中遇到翻页后无法获取xpath,如何解决?

个人使用八爪鱼软件进行b站评论区数据爬取的过程中,发现软件在翻页后始终进行固定元素列表操作

img

经过排查发现问题出在翻页后软件无法获取第二页搜索结果视频的xpath,特来求解

img

此外,本人也发现对于b站评论区的追评部分,软件没有办法将其视作和初始评论相同,就导致了在爬取时会采用创建新字段的方式获取。这影响了爬取的数量和效率,想请问该如何实现自动点击评论区中的更多评论键(包括评论的翻页)功能,并将追评和首次评论放到同一列?

烦请各位帮忙解决,谢谢!

注:附上当前我的流程图

img

  • 写回答

1条回答 默认 最新

  • CSDN-Ada助手 CSDN-AI 官方账号 2024-01-05 20:32
    关注

    【相关推荐】




    如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 写成博客, 将相关链接放在评论区, 以帮助更多的人 ^-^
    评论

报告相同问题?

问题事件

  • 创建了问题 1月5日

悬赏问题

  • ¥15 Windows Script Host 无法找到脚本文件"C:\ProgramData\Player800\Cotrl.vbs”
  • ¥15 matlab自定义损失函数
  • ¥15 35114 SVAC视频验签的问题
  • ¥15 impedancepy
  • ¥15 求往届大挑得奖作品(ppt…)
  • ¥15 如何在vue.config.js中读取到public文件夹下window.APP_CONFIG.API_BASE_URL的值
  • ¥50 浦育平台scratch图形化编程
  • ¥20 求这个的原理图 只要原理图
  • ¥15 vue2项目中,如何配置环境,可以在打完包之后修改请求的服务器地址
  • ¥20 微信的店铺小程序如何修改背景图