網站首頁 編程語言 正文
本文主要給大家講解一下,如何在yolov5中添加注意力機制,
這里提供SE通道注意力的改進方法,其他注意力的添加方法,大同小異
首先找到SE注意力機制的pytorch代碼
class SELayer(nn.Module):
def __init__(self, c1, r=16):
super(SELayer, self).__init__()
self.avgpool = nn.AdaptiveAvgPool2d(1)
self.l1 = nn.Linear(c1, c1 // r, bias=False)
self.relu = nn.ReLU(inplace=True)
self.l2 = nn.Linear(c1 // r, c1, bias=False)
self.sig = nn.Sigmoid()
def forward(self, x):
b, c, _, _ = x.size()
y = self.avgpool(x).view(b, c)
y = self.l1(y)
y = self.relu(y)
y = self.l2(y)
y = self.sig(y)
y = y.view(b, c, 1, 1)
return x * y.expand_as(x)
直接把SE注意力機制的程序,復制到models文件夾下面的common.py文件中
然后找到yolo.py,在這個文件中找到下面這一行
?然后把SE添加到這個注冊表里,
?直接在C3Ghost后面加上SELayer
然后是要修改yaml文件,對于SE這種即插即用的注意力機制,輸入和輸出的通道數相同,所以不會影響其他模塊的運行
注意力機制也可以插在其他地方,只要注意把通道數對應好就行
然后head部分也要進行相應的修改,因為我們多加了一層,所以需要保持head以及最后的輸出層不變就得稍微改一下head部分,同樣,注意力機制也可以放在head里面,跟加在backbone里面的方法相同。
這是原始的head部分,需要修改成下面這樣
因為我們把SE注意力機制插在第八層之后,所以原先的14層就變成了15層,同樣的,最后的輸出也需要把層數加一。
添加這些注意力機制是yolov5最基礎的改進,但是說實話,注意力機制可以添加在很多的地方,不一定會有效果,所以插在哪里效果最好就需要大家自行討論了。?注意力機制也有很多種,se注意力機制應該是屬于最基礎的通道注意力了吧
總結
原文鏈接:https://blog.csdn.net/weixin_47060902/article/details/124900408
相關推薦
- 2022-04-24 python使用技巧-標準輸入_python
- 2021-12-28 Android中實現視差滾動示例介紹_Android
- 2022-12-28 Python中的Decorator裝飾器的使用示例_python
- 2023-11-17 Linux centos創建用戶以及賦予sudo權限
- 2022-08-12 python算法加密?pyarmor與docker_python
- 2022-07-21 安裝MiniConda和Pytorch以及Cuda的筆記及心得
- 2022-08-11 python中@Property屬性使用方法_python
- 2022-11-25 React之echarts-for-react源碼解讀_React
- 最近更新
-
- window11 系統安裝 yarn
- 超詳細win安裝深度學習環境2025年最新版(
- Linux 中運行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎操作-- 運算符,流程控制 Flo
- 1. Int 和Integer 的區別,Jav
- spring @retryable不生效的一種
- Spring Security之認證信息的處理
- Spring Security之認證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權
- redisson分布式鎖中waittime的設
- maven:解決release錯誤:Artif
- restTemplate使用總結
- Spring Security之安全異常處理
- MybatisPlus優雅實現加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務發現-Nac
- Spring Security之基于HttpR
- Redis 底層數據結構-簡單動態字符串(SD
- arthas操作spring被代理目標對象命令
- Spring中的單例模式應用詳解
- 聊聊消息隊列,發送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠程分支