日本免费高清视频-国产福利视频导航-黄色在线播放国产-天天操天天操天天操天天操|www.shdianci.com

學(xué)無(wú)先后,達(dá)者為師

網(wǎng)站首頁(yè) 編程語(yǔ)言 正文

python中編寫(xiě)config文件并及時(shí)更新的方法_python

作者:Rilkean?heart ? 更新時(shí)間: 2023-07-02 編程語(yǔ)言

0. Intro

  • 在pytorch或者其他深度學(xué)習(xí)框架中,有許多超參數(shù)需要調(diào)整,包括learning_ratetraining_data_path等,因此編寫(xiě)一個(gè)config文件統(tǒng)一存放這些參數(shù),方便調(diào)用/查看/修改還是很有必要的。下面是我使用過(guò)的一種很簡(jiǎn)單的方式,不是很優(yōu)雅,小模型下初步的微調(diào)已經(jīng)夠用,希望也對(duì)你有所幫助,有更好更pro的方式歡迎大家留言~
  • 我這里的目錄結(jié)構(gòu):
  • MLP
  • mlp.ipynb: 用于training等
  • config.py: 存放超參數(shù)、路徑
  • data
  • targets:targets data path
  • train:training data path

1. config.py

這個(gè).py文件實(shí)際上是一個(gè)class,大概如下:

class DefaultConfig(object):

    # dataset劃分
    batch_size = 40
    train_pct = 0.7
    vali_pct = 0.2
    test_pct = 0.1
    
    #learning rate
    learning_rate = 1e-3
    
    # Training data
    train_path = r"../data/train"
    target_path_metric = r"../data/targets"

2. 調(diào)用以及更新

寫(xiě)成class之后,在mlp.ipynb中調(diào)用只需要引用一下就完事了:

import config  # import進(jìn)來(lái)
reload(config)  ################## 注意這里必須reload!!
from config import DefaultConfig	# 引入class

opt = DefaultConfig()		# 實(shí)例config對(duì)象

# 這里名字最好保持和clas內(nèi)部一致,方便檢查
batch_size = opt.batch_size
train_pct = opt.train_pct
vali_pct = opt.vali_pct
test_pct = opt.test_pct

注意,很可能當(dāng)我們改動(dòng)config.py之后,外部文件的參數(shù)不會(huì)及時(shí)更新,所以加入reload語(yǔ)句是一個(gè)很好的習(xí)慣

import config  # import進(jìn)來(lái)
reload(config)  ################## 注意這里必須reload!!

原文鏈接:https://blog.csdn.net/qq_42147816/article/details/129224306

  • 上一篇:沒(méi)有了
  • 下一篇:沒(méi)有了
欄目分類
最近更新