我在YOLOv3上添加过SE模块, 在训练过程中, 发现Tensorboard上查准率P和查全率R在前几个epochs中上升较快, Loss下降也比较平缓. 对SE论文理解较浅显, 可以对上面现象解释一下吗, 感谢.
关注
码龄 粉丝数 原力等级 --
- 被采纳
- 被点赞
- 采纳率
CV计算机视觉, 注意力机制Attention如SE CBAM, 可以对损失函数的收敛速度起作用吗?
收起
- 写回答
- 好问题 0 提建议
- 关注问题
微信扫一扫点击复制链接分享
- 邀请回答
- 编辑 收藏 删除 结题
- 收藏 举报
1条回答 默认 最新
- 关注
码龄 粉丝数 原力等级 --
- 被采纳
- 被点赞
- 采纳率
歇歇 2021-03-23 09:30关注有
本回答被题主选为最佳回答 , 对您是否有帮助呢? 本回答被专家选为最佳回答 , 对您是否有帮助呢? 本回答被题主和专家选为最佳回答 , 对您是否有帮助呢?解决评论 打赏无用 1举报
微信扫一扫点击复制链接分享
评论按下Enter换行,Ctrl+Enter发表内容
报告相同问题?
提交
- 2023-08-09 14:44卖报的大地主的博客 CBAM旨在克服传统卷积神经网络在处理不同尺度、形状和方向信息时的局限性。...通过将通道注意力和空间注意力结合起来,CBAM模块能够在不同维度上捕获特征之间的相关性,从而提升图像识别任务的性能。
- 2024-02-06 21:50为了改善这一情况,研究者引入了“视觉注意力机制”,这种机制源自自然语言处理领域的自注意力(Self-Attention)。 自注意力机制是Transformer模型的核心组成部分,它允许模型根据每个位置的上下文信息来赋予不同...
- 2023-07-20 16:47IDONTCARE8的博客 注意力机制(attention mechanism)受人类视觉机制的研究,让网络学习更关注的特征。注意力机制主要有:自注意力(self-attention)、软注意力(soft-attention)、硬注意力(hard-attention)。其已经广泛应用于分类、...
- 2025-11-28 09:43sugar的博客 本文深入对比了无参数注意力机制SimAM与传统CBAM在5大视觉任务中的性能表现。实验表明,SimAM在图像分类、目标检测等任务中均优于CBAM,尤其在保持原始模型参数量的同时实现了更高的精度提升。文章详细解析了SimAM的...
- 2026-04-16 19:49九章云极AladdinEdu的博客 注意力机制通过动态调整特征图中不同通道与空间位置的重要性权重,显著提升了卷积神经网络的表征能力。SENet开创性地提出了通道挤压与激励的轻量级模块,仅增加少量参数即获得可观精度增益;CBAM进一步融合了通道与...
- 2024-02-06 22:24标题中的“基于CBAM空间注意力机制改进YOLOv5的公路智能巡检系统”表明了这是一个利用计算机视觉技术,特别是深度学习模型YOLOv5,针对公路巡检场景进行优化的项目。CBAM(Convolutional Block Attention Module)是...
- 2024-08-28 09:31小殊小殊的博客 CBAM(Convolutional Block Attention Module)是2018年被提出的,不同于ViT的Attention,CBAM是为CNN量身定做的Attention模块,实现简单、效果好,你值得拥有。
- 2022-08-16 15:30XuecWu3的博客 本文对于在计算机视觉任务中常用的三种注意力机制进行了代码实现以及结构的详解。
- 2024-11-08 11:25好喜欢吃红柚子的博客 注意力机制总结
- 2025-10-03 00:02ik6789012的博客 本文深入解析了CBAM(Convolutional Block Attention Module)这一即插即用的双重注意力机制,及其在轻量化视觉任务中的实战应用。文章详细拆解了通道注意力与空间注意力的协同工作原理,并以MobileNetV2为例,演示...
- 2023-02-10 21:56Philo`的博客 介绍在CNN中的常见的三种注意力机制,并且提供了Pytorch代码 2023.3.2新增SKNet代码,同是修改SkNet在测试时不报错,但是在反向传播中报错的情况。 2023.3.10 新增scSE注意力代码 2023.3.11 新增Non-Local Net代码 ...
- 2023-10-13 12:53JOYCE_Leo16的博客 注意力机制(Attention Mechanism)源于对人类视觉的研究。在认知科学中,由于信息处理的瓶颈,人类会选择性地关注所有信息的一部分,同时忽略其他可见的信息。为了合理利用有限的视觉信息处理资源,人类需要选择...
- 2021-11-19 21:27Fighting_1997的博客 注意力机制(Attentional Mechanism) 通常将软注意力机制中的模型结构分为三大注意力域来分析: 空间域 空间域——将图片中的的空间域信息做对应的空间变换,从而能将关键的信息提取出来。对空间进行掩码的生成,...
- 2024-01-31 17:25花花少年的博客 通俗易懂理解注意力机制(Attention Mechanism)
- 2020-01-12 21:03落樱弥城的博客 不同的注意力机制2.1 SEBlock2.1.1 SEBlock结构2.1.2 实现2.1.2.1 SEBlock的实现2.2 PAM and CAM2.2.1 Position Attention Module2.2.2 Channel Attention Module2.2.3 代码实现2.3 CBAM2.3.1 CBAM结构2.3.1.1 ...
- 2026-03-18 00:2190后的世界观世界的博客 本文深入探讨了CBAM(Convolutional Block Attention Module)双注意力机制如何推动CNN架构的革新。通过对比SE-Net与CBAM的设计差异,详细解析了通道注意力和空间注意力机制的协同效应,并展示了CBAM在图像分类、...
- 2023-10-12 13:13小哥谈的博客 注意力机制是近年来深度学习领域内的研究热点,可以帮助模型更好地关注重要的特征,从而提高模型的性能。本节课就给大家介绍一下SE、CBAM和SE注意力机制,希望大家学习之后能够有所收获!
- 2021-03-10 20:57姚路遥遥的博客 论文题目:《CBAM: Convolutional Block Attention...论文(2018年)提出了一种轻量的注意力模块( CBAM,Convolutional Block Attention Module ),可以在通道和空间维度上进行 Attention 。论文在 ResNet 和 MobileNet
- 2024-03-28 10:22秃头小苏的博客 hello,大家好,我是小苏 好久没有更新博客啦,今天来更一期注意力机制的文章吧!!!在之前,我已经为大家介绍了一种最常见的注意力机制——SENET,感兴趣的可以点击☞☞☞了解详情。当然了,我也为大家介绍过...
- 没有解决我的问题, 去提问