XS147 2023-09-24 09:37 采纳率: 100%

已结题

关于#python,bs4库#的问题：soup.find_all返回了空列表

soup.find_all返回空列表
我的选择器是

#选择器
comicElems = soup.find_all('img')

这是部分html页面


<div class="main main-scroll_mode J_scroll_mode J_block" data-block="810100" data-blockname="阅读视图">
    <ul class="main-container">
        
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611yioH1MrtvZ2D6LpP.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611VAfrYl73yiemkdvW.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/16749086106lZHGxc612L3c2n0.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908610FKXNG5OEiqPo9NeA.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/167490860994dnW80_stZ8pi-z.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908609HSJ9BlnnEiz9trJb.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908608dnK2-1T5_FJme1TU.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908608N3psToVy_xqdDuGP.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908607z_7JMzahbDs5m0Ic.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/16749086076bsaHtURI1zTU-wG.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908606awNk3_sPuZhH7iPz.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908606BtSyyCYoBIou9rY6.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908605CsK4ohyHtKybpppr.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908605zP0qpB-zum0u_B0O.jpg"></li>
        
        
        <li class="main-item">
            <p class="next-subtit">即将进入下一话</p><a data-rseat="tnextchp" href="" class="next-title">没有了<i class="icon-next"></i></a>
        </li>
    </ul>
</div> <!-- 底部 -->

返回了空列表
但是相同网站的另一个页面(部分)
正常返回了所有带<img的元素列表：


<!-- 滚动模式 -->
<div class="main main-scroll_mode J_scroll_mode J_block" data-block="810100" data-blockname="阅读视图">
    <ul class="main-container">
        
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792866448182820ba2c97d5.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928676971828219c0a6175.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928689191828227de82b15.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928698861828235fc5f4b5.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179287006918282441a3be55.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792871285182825238187f5.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179287189918282655f5195.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792873062182827e73d1b4a.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792873480182828c91ae4ea.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928778191828292714b0ed.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179287504418282108f27a8d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928753411828211ead0442d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928768961828212ccae0dcd.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928858801828213ae8bd76d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179288233718282149069a10d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792880555182821572476aad.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179288292018282165425344d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179288447518282173602fe02.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792887402182821817e0c7a2.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792888146182821980f01b4d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792889580182822062cde4ed.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792891622182822144abae8d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179289470418282222689782d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792895469182822386741cd.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928962341828224ea450b6d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817929024801828225cc22d50d.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817928986371828226ae009ead.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/148179290059718282278fde6862.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/1481792899335182822871bc3202.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817929007211828229dacb85ad.jpg"></li>
        
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/10/18282/14817929019241828230bca94f4d.jpg"></li>
        
        
        <li class="main-item">
            <p class="next-subtit">即将进入下一话</p><a data-rseat="tnextchp" href="/chapter/199900-37126.html" class="next-title">第四话番外<i class="icon-next"></i></a>
        </li>
    </ul>
</div> <!-- 底部 -->

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

1条回答默认最新

CSDN-Ada助手 CSDN-AI 官方账号 2023-09-24 12:33

关注

【以下回答由 GPT 生成】

问题分析：通过观察HTML代码，我们可以看到img元素是位于li元素的内部，而li元素又是位于ul元素的内部。因此，我们需要通过嵌套选择器的方式来获取img元素。

解决方案：首先，确定选择器的层级关系，我们可以使用ul作为选择器的起点，然后选择li元素，再选择其中的img元素。

具体步骤如下： 1. 导入所需模块：

from bs4 import BeautifulSoup

获取HTML代码：

html = '''
<div class="main main-scroll_mode J_scroll_mode J_block" data-block="810100" data-blockname="阅读视图">
    <ul class="main-container">
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611yioH1MrtvZ2D6LpP.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611VAfrYl73yiemkdvW.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/16749086106lZHGxc612L3c2n0.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908610FKXNG5OEiqPo9NeA.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/167490860994dnW80_stZ8pi-z.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908609HSJ9BlnnEiz9trJb.jpg"></li>
</div>
'''

创建BeautifulSoup对象：

soup = BeautifulSoup(html, 'html.parser')

使用嵌套选择器查找img元素：

ulElem = soup.find('ul', class_='main-container')
liElems = ulElem.find_all('li', class_='main-item')
comicElems = [liElem.find('img') for liElem in liElems]

遍历输出获取到的img元素的src属性值：

for comicElem in comicElems:
    print(comicElem['src'])

预期输出：

https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611yioH1MrtvZ2D6LpP.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611VAfrYl73yiemkdvW.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/16749086106lZHGxc612L3c2n0.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/1674908610FKXNG5OEiqPo9NeA.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/167490860994dnW80_stZ8pi-z.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/1674908609HSJ9BlnnEiz9trJb.jpg

解决方案演示：

from bs4 import BeautifulSoup

html = '''
<div class="main main-scroll_mode J_scroll_mode J_block" data-block="810100" data-blockname="阅读视图">
    <ul class="main-container">
        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611yioH1MrtvZ2D6LpP.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611VAfrYl73yiemkdvW.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/16749086106lZHGxc612L3c2n0.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908610FKXNG5OEiqPo9NeA.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/167490860994dnW80_stZ8pi-z.jpg"></li>

        <li class="main-item"><img src="https://res.xiaoqinre.com/images/comic/1014/2027038/1674908609HSJ9BlnnEiz9trJb.jpg"></li>
</div>
'''

soup = BeautifulSoup(html, 'html.parser')
ulElem = soup.find('ul', class_='main-container')
liElems = ulElem.find_all('li', class_='main-item')
comicElems = [liElem.find('img') for liElem in liElems]

for comicElem in comicElems:
    print(comicElem['src'])

输出结果：

https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611yioH1MrtvZ2D6LpP.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/1674908611VAfrYl73yiemkdvW.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/16749086106lZHGxc612L3c2n0.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/1674908610FKXNG5OEiqPo9NeA.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/167490860994dnW80_stZ8pi-z.jpg
https://res.xiaoqinre.com/images/comic/1014/2027038/1674908609HSJ9BlnnEiz9trJb.jpg

【相关推荐】

这篇博客: Python Beautiful Soup教程-方法选择器中的 2.方法选择器之 find_all() 方法 部分也许能够解决你的问题。

如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 写成博客, 将相关链接放在评论区, 以帮助更多的人 ^-^

本回答被题主选为最佳回答 , 对您是否有帮助呢?

报告相同问题？

关注问题

用Python爬取智慧树问题时，没办法入到soup.find_all（）的for循环中 python
2021-08-27 15:54

回答 1 已采纳因为你数据没有抓取到, 所以打印没输出
Python爬虫，我用bs4的find方法为什么反回的是空值？怎么解决（已解决）？ python
2019-08-18 15:16

回答 1 已采纳 find找到空值，就证明没找到，你可以先打印request返回的内容，确认确实返回了内容再然后就是你的find查找标签，可能标签不对，先找上一级标签，print出来看行不行一级一级往下呗。
关于#python#的问题：python爬虫爬取百度图片 python 有问必答爬虫
2021-11-27 22:00

回答 2 已采纳你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。或者是通
Python中bs4的soup.find()和soup.find_all()用法
2024-06-12 20:35

2401_85674920的博客 list=soup.find_all(name="li") for tag in tag_list: print(tag.name,tag.text) 结果如下：（输出name和text） li 唱 li 跳 li rap li 篮球 2.2利用attrs找多个代码如下： from bs4 import BeautifulSoup ...
关于#BeautifulSoup#的问题，如何解决？(语言-python) python
2022-11-27 09:23

回答 1 已采纳帮你找了个相似的问题, 你可以看下: https://ask.csdn.net/questions/7538372你也可以参考下这篇文章：python使用beautifulsoup 获取标签,经典笔记
关于#python#的问题，请各位专家解答！ python 爬虫
2023-03-01 22:24

回答 2 已采纳应该是Judge = re.findall(findJudge, item)[0]中正则匹配re.findall(findJudge, item)结果是空列表，用[0]读取的时候提示索引越界了。可修改
CentOS 7+python3 使用 find_all获取不到指定的class元素 centos linux python
2021-06-12 23:29

回答 1 已采纳你的写法不对，我写给你： from bs4 import BeautifulSoup response = '<a class="title_dIF3B">标题</a>'
python soup.find_初识python 之爬虫：BeautifulSoup 的 find、find_all、select 方法
2020-12-08 21:39

weixin_39637975的博客 from bs4 import BeautifulSouplxml 以lxml形式解析html，例：BeautifulSoup(html,'lxml') #注：html5lib 容错率最高find 返回找到的第一个标签find_all 以list的形式返回找到的所有标签limit 指定返回的标签个数...
怎么二次提取<class 'bs4.element.ResultSet'>类型文件中的内容 python
2021-06-19 15:35

回答 1 已采纳 Beatifulsoup库文档：https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/#id7 另外，稍微在CSDN上查一下Beatifulsoup爬取
python报错：requests.exceptions.ConnectionError: ('Connection aborted.', OSError("(10060, 'WSAETIMEDOUT')")) python 开发语言
2020-03-02 19:59

回答 2 已采纳 10060 WSAETIMEDOUT 是请求超时了，请确认 res = requests.get(url) 这一句请求的地址是否拼接正确，如果是正确的，那就设置超时时间大一点吧。
关于#BeautifulSoup#的.text的问题，请问如何解决？ python 爬虫
2022-08-11 16:59

回答 1 已采纳 soup.select("#main>#main_left>.book-mulu a")返回的是一个列表, 要加[0]访问列表的第一元素的.text另外.book-mulu 不是#main
python soup.find_BeautifulSoup中find和find_all的使用详解
2020-12-08 21:39

weixin_39947522的博客爬虫利器BeautifulSoup中find和find_all的使用方法二话不说，先上段HTML例子indexfirst itemsecond itemthird itemfourth itemfifth item hello world 使用BeautifulSoup前需要先构建BeautifulSoup实例# 构建...
爬虫学习时错误IndexError: list index out of range（列表索引超出范围） python 有问必答
2021-10-01 17:23

回答 1 已采纳去掉break。。要不for下面的append不生效。。而且item是node，需要转为字符串，取消注释item = str(item) 改完上面2步骤后可以了，正常采集有帮助麻烦点个采纳【本回
python bs4 find_all_beautifulsoup4 bs4 find_all & find 函数解析
2021-01-14 12:11

三火小哥哥的博客假定soup是我们下载下来的网页的对象了soup = BeautifulSoup(a, "html.parser")# 第一种，直接将属性名作为参数名，但是有些属性不行，比如像a-b这样的属性soup.find_all('p', id = 'p1') # 一般情况soup.find_all('...
爬虫数据解析bs4获取所有属性时，bs.find_all返回值为空列表，请问什么原因
2022-01-27 16:28

孟波61的博客 python爬虫数据解析bs4获取属性返回空列表的问题
没有解决我的问题, 去提问

问题事件

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
系统已结题 10月2日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
已采纳回答 9月24日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
创建了问题 9月24日

悬赏问题

¥20 有偿：在ubuntu上安装arduino以及其常用库文件。
¥15 请问用arcgis处理一些数据和图形，通常里面有一个根据点划泰森多边形的命令，直接划的弊端是只能执行一个完整的边界，但是我们有时候会用到需要在有很多边界内利用点来执行划泰森多边形的命令
¥30 在wave2foam中执行setWaveField时遇到了如下的浮点异常问题，请问该如何解决呢？
¥20 看图片）删除这个自动化录屏脚本就一直报错找不到脚本文件，如何解决？（相关搜索：bat文件）
¥750 关于一道数论方面的问题，求解答！(关键词-数学方法)
¥200 csgo2的viewmatrix值是否还有别的获取方式
¥15 Stable Diffusion，用Ebsynth utility在视频选帧图重绘，第一步报错，蒙版和帧图没法生成，怎么处理啊
¥15 请把下列每一行代码完整地读懂并注释出来
¥15 pycharm运行main文件，显示没有conda环境
¥15 寻找公式识别开发，自动识别整页文档、图像公式的软件

关于#python,bs4库#的问题：soup.find_all返回了空列表

1条回答 默认 最新

问题事件

悬赏问题

1条回答默认最新