網站首頁 編程語言 正文
yolov5訓練命令
python .\train.py --data my.yaml --workers 8 --batch-size 32 --epochs 100
yolov5的訓練很簡單,下載好倉庫,裝好依賴后,只需自定義一下data目錄中的yaml文件就可以了。這里我使用自定義的my.yaml文件,里面就是定義數據集位置和訓練種類數和名字。
workers和batch-size參數的理解
一般訓練主要需要調整的參數是這兩個:
workers
指數據裝載時cpu所使用的線程數,默認為8。代碼解釋如下
parser.add_argument('--workers', type=int, default=8, help='max dataloader workers (per RANK in DDP mode)')
一般默使用8的話,會報錯~~。原因是爆系統(tǒng)內存,除了物理內存外,需要調整系統(tǒng)的虛擬內存。訓練時主要看已提交哪里的實際值是否會超過最大值,超過了不是強退程序就是報錯。
所以需要根據實際情況分配系統(tǒng)虛擬內存(python執(zhí)行程序所在的盤)的最大值
batch-size
就是一次往GPU哪里塞多少張圖片了。決定了顯存占用大小,默認是16。
parser.add_argument('--batch-size', type=int, default=16, help='total batch size for all GPUs, -1 for autobatch')
訓練時顯存占用越大當然效果越好,但如果爆顯存,也是會無法訓練的。我使用–batch-size 32時,顯存差不多能利用完。
兩個參數的調優(yōu)
對于workers,并不是越大越好,太大時gpu其實處理不過來,訓練速度一樣,但虛擬內存(磁盤空間)會成倍占用。
workers為4時的內存占用
workers為8時的內存占用
我的顯卡是rtx3050,實際使用中上到4以上就差別不大了,gpu完全吃滿了。但是如果設置得太小,gpu會跑不滿。比如當workers=1時,顯卡功耗只得72W,速度慢了一半;workers=4時,顯卡功耗能上到120+w,完全榨干了顯卡的算力。所以需要根據你實際的算力調整這個參數。
2. 對于batch-size,有點玄學。理論是能盡量跑滿顯存為佳,但實際測試下來,發(fā)現當為8的倍數時效率更高一點。就是32時的訓練效率會比34的高一點,這里就不太清楚原理是什么了,實際操作下來是這樣。
總結
原文鏈接:https://blog.csdn.net/flamebox/article/details/123011129
相關推薦
- 2022-12-24 Kubernetes?Visitor設計模式及發(fā)送pod創(chuàng)建請求解析_云和虛擬化
- 2022-11-24 Django中ORM基本應用與原理解析_python
- 2023-02-04 Golang中for循環(huán)的用法示例詳解_Golang
- 2022-07-02 C++中關于互斥量的全面認知_C 語言
- 2022-09-12 shell腳本5種執(zhí)行方式及腳本不同的執(zhí)行方法和區(qū)別詳解_linux shell
- 2022-03-23 C++成員初始化列表_C 語言
- 2023-01-14 GoLang日志監(jiān)控系統(tǒng)實現_Golang
- 2021-11-01 redux工作原理講解及使用方法_React
- 最近更新
-
- window11 系統(tǒng)安裝 yarn
- 超詳細win安裝深度學習環(huán)境2025年最新版(
- Linux 中運行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎操作-- 運算符,流程控制 Flo
- 1. Int 和Integer 的區(qū)別,Jav
- spring @retryable不生效的一種
- Spring Security之認證信息的處理
- Spring Security之認證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權
- redisson分布式鎖中waittime的設
- maven:解決release錯誤:Artif
- restTemplate使用總結
- Spring Security之安全異常處理
- MybatisPlus優(yōu)雅實現加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務發(fā)現-Nac
- Spring Security之基于HttpR
- Redis 底層數據結構-簡單動態(tài)字符串(SD
- arthas操作spring被代理目標對象命令
- Spring中的單例模式應用詳解
- 聊聊消息隊列,發(fā)送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠程分支