Skip to main content
1 / 2

PyTorchでの損失関数と最適化アルゴリズムの結びつけについて

DLの学習時には、モデルを使って予測を出す→損失関数で損失を計算→損失関数を最適化アルゴリズムに(逆伝播&パラメータ更新)という流れだと思うのですが、これをPyTorchを行う時、「この最適化アルゴリズムでこの損失関数を最適化するよ」という情報の結びつけは自動的に行われるのでしょうか?

具体的には、以下にあるように

# 正しいコード
# 交差エントロピー誤差関数
loss_fnc = nn.CrossEntropyLoss()
 
# SGD
optimizer = optim.SGD(net.parameters(), lr=0.01)  # 学習率は0.01

ではなく

# 誤ったコード
# 交差エントロピー誤差関数
loss_fnc = nn.CrossEntropyLoss()
 
# SGD
# 最適化をおこなう関数を指定するようなパラメータがあると仮定
optimizer = optim.SGD(net.parameters(), lr=0.01, target=loss_fnc)  # 学習率は0.01

のようにしなくても、自動的に結びついているのでしょうか?

また、どこで結びつけがなされているのでしょうか?