Hyoyeong_ 2021-10-06 01:48 采纳率: 66.7%
浏览 41
已结题

关于#python#的问题：请问怎么用beautifulsoup来解析爬取书名之类的信息呢

img

请问怎么用beautifulsoup来解析爬取书名之类的信息呢？我总是用find ()和find_all方法却爬不出东西太绝望了！

  • 写回答

2条回答 默认 最新

  • CSDN专家-天际的海浪 2021-10-06 01:50
    关注

    你把完整的代码用代码段以文本的形式发一下看看

    img

    你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。
    requests只能获取网页的静态源代码，动态更新的内容取不到。
    对于动态更新的内容要用selenium 来爬取。

    或者是通过F12控制台分析页面数据加载的链接，找到真正json数据的地址进行爬取。

    在页面上点击右键，右键菜单中选 "查看网页源代码"。

    img


    这样看到的才是网页的静态源代码。
    如果这个网页的静态源代码中有你需要爬取的内容，就说明该页面没有动态内容，可以用requests爬取。
    否则就说明该页面的内容是动态更新的，要用selenium 来爬取.

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题？

问题事件

  • 系统已结题 10月14日
  • 已采纳回答 10月6日
  • 创建了问题 10月6日

悬赏问题

  • ¥15 WPF动态创建页面内容
  • ¥15 如何对TBSS的结果进行统计学的分析已完成置换检验，如何在最终的TBSS输出结果提取除具体值及如何做进一步相关性分析
  • ¥15 SQL数据库操作问题
  • ¥100 关于lm339比较电路出现的问题
  • ¥15 Matlab安装yalmip和cplex功能安装失败
  • ¥15 加装宝马安卓中控改变开机画面
  • ¥15 STK安装问题问问大家，这种情况应该怎么办
  • ¥15 关于罗技鼠标宏lua文件的问题
  • ¥15 halcon ocr mlp 识别问题
  • ¥15 已知曲线满足正余弦函数，根据其峰值，还原出整条曲线