YOLOv5改进教程之添加注意力机制
更新时间：2022年06月27日 08:58:55 作者：weixin_47060902
注意力机制最先被用在NLP领域,Attention就是为了让模型认识到数据中哪一部分是最重要的,为它分配更大的权重,获得更多的注意力在一些特征上,让模型表现更好,这篇文章主要给大家介绍了关于YOLOv5改进教程之添加注意力机制的相关资料,需要的朋友可以参考下
本文主要给大家讲解一下，如何在yolov5中添加注意力机制，
这里提供SE通道注意力的改进方法，其他注意力的添加方法，大同小异
首先找到SE注意力机制的pytorch代码
class SELayer(nn.Module):
def __init__(self, c1, r=16):
super(SELayer, self).__init__()
self.avgpool = nn.AdaptiveAvgPool2d(1)
self.l1 = nn.Linear(c1, c1 // r, bias=False)
self.relu = nn.ReLU(inplace=True)
self.l2 = nn.Linear(c1 // r, c1, bias=False)
self.sig = nn.Sigmoid()
def forward(self, x):
b, c, _, _ = x.size()
y = self.avgpool(x).view(b, c)
y = self.l1(y)
y = self.relu(y)
y = self.l2(y)
y = self.sig(y)
y = y.view(b, c, 1, 1)
return x * y.expand_as(x)直接把SE注意力机制的程序，复制到models文件夹下面的common.py文件中
然后找到yolo.py，在这个文件中找到下面这一行
然后把SE添加到这个注册表里，
直接在C3Ghost后面加上SELayer
然后是要修改yaml文件，对于SE这种即插即用的注意力机制，输入和输出的通道数相同，所以不会影响其他模块的运行
注意力机制也可以插在其他地方，只要注意把通道数对应好就行
然后head部分也要进行相应的修改，因为我们多加了一层，所以需要保持head以及最后的输出层不变就得稍微改一下head部分，同样，注意力机制也可以放在head里面，跟加在backbone里面的方法相同。
这是原始的head部分，需要修改成下面这样
因为我们把SE注意力机制插在第八层之后，所以原先的14层就变成了15层，同样的，最后的输出也需要把层数加一。
添加这些注意力机制是yolov5最基础的改进，但是说实话，注意力机制可以添加在很多的地方，不一定会有效果，所以插在哪里效果最好就需要大家自行讨论了。 注意力机制也有很多种，se注意力机制应该是属于最基础的通道注意力了吧
总结
到此这篇关于YOLOv5改进教程之添加注意力机制的文章就介绍到这了,更多相关YOLOv5添加注意力机制内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要为大家介绍了Python爬虫数据处理模块的安装使用教程，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-06-06
这篇文章主要介绍了基于python的selenium两种文件上传操作实现详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-09-09
这篇文章主要为大家介绍了python使用canvas实现移动并绑定键盘，具有一定的参考价值，感兴趣的小伙伴们可以参考一下，希望能够给你带来帮助2021-12-12
这篇文章主要介绍了python变量加逗号,的含义,本文通过实例代码给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下2020-02-02
这篇文章主要为大家详细介绍了Python搭建HTTP服务器和FTP服务器的相关资料，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2017-03-03
这篇文章主要介绍了给Python初学者的一些编程技巧,皆是基于基础的一些编程习惯建议,需要的朋友可以参考下2015-04-04
今天小编就为大家分享一篇关于Python爬取数据保存为Json格式的代码示例，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧2019-04-04
这篇文章主要给大家介绍了kali的局域网攻击,小编觉得这篇文章还是不错的,使用起来也是非常方便的,需要的朋友可以参考下2021-08-08
由于simhash方法有多种实现方式,现python中simhash方法与golang中的不一样,需要两者代码生成结果保持一致,故采用python中的代码调用golang编译的so文件来实现,需要的朋友可以参考下2024-02-02
本文主要介绍了Python写一个简单的api接口的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-02-02
最新评论