sinopw 2022-01-08 21:28 采纳率: 100%
浏览 44
已结题

为什么爬虫爬到了东西但解析不了

import requests
from bs4 import BeautifulSoup
import csv

url='https://www.epo.org/search.html?q=hydrogen%20storage&resultsPerPage=100&sortOrder=1'

data_list=[]

res=requests.get(url)
print(res.status_code)
bs=BeautifulSoup(res.text,'html.parser')
reslist=bs.find_all('a',class_='headlink')
print(reslist)

最后一行出来的结果是'[]'
为什么啊



  • 写回答

2条回答 默认 最新

  • CSDN专家-showbo 2022-01-08 21:32
    关注

    网址数据是动态加载的,requests无法获取,需要找到数据接口来请求。数据接口网址:https://www.epo.org/search/api/v2/search
    需要post请求,发送参数

    img

    img

    img

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论 编辑记录
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 1月16日
  • 已采纳回答 1月8日
  • 创建了问题 1月8日

悬赏问题

  • ¥50 求解vmware的网络模式问题 别拿AI回答
  • ¥24 EFS加密后,在同一台电脑解密出错,证书界面找不到对应指纹的证书,未备份证书,求在原电脑解密的方法,可行即采纳
  • ¥15 springboot 3.0 实现Security 6.x版本集成
  • ¥15 PHP-8.1 镜像无法用dockerfile里的CMD命令启动 只能进入容器启动,如何解决?(操作系统-ubuntu)
  • ¥30 请帮我解决一下下面六个代码
  • ¥15 关于资源监视工具的e-care有知道的嘛
  • ¥35 MIMO天线稀疏阵列排布问题
  • ¥60 用visual studio编写程序,利用间接平差求解水准网
  • ¥15 Llama如何调用shell或者Python
  • ¥20 谁能帮我挨个解读这个php语言编的代码什么意思?