0

NN(Neural Network)を訓練する時に、
batch出力にNaNが混じっている場合があると気づきましたが、
optimizerのstep実行に例外が発生していません。
しかし、NaNの存在が訓練過程を不安定させたり、訓練速度や精度をダウンさせたりする事は容易に想像できますので、どう対処すれば良いのでしょうか。

7
  • 「batch出力にNaNが混じっている場合がある」とはどういう状況でしょうか?
    – merino
    2022年12月25日 3:39
  • NNのbatch単位の出力の中にNaNとなっているデータが時々あります。特に訓練の初期段階で多出します。これでloss計算やOptimizerのstepにどんな影響を与えるか気になります。ただNaNの存在はどのNNにおいても良くある現象ではと思いますので、loss関数やOptimizerの中に適切に対応していなければ、大変な事になるでしょうね。普段皆さんの対処法を知りたいです。 2022年12月25日 4:51
  • 「NNのbatch単位の出力」とは何を指していますか?訓練中のパラメータ値のことでしょうか? 何らかの可視化処理を追加されているのでしょうか?
    – merino
    2022年12月25日 5:42
  • < NNのbatch単位の出力> 通常NNの入出力はみな(mini)batch単位ですよ。 2022年12月25日 14:13
  • 勾配消失問題のことをおっしゃっていますか?それとも別のことでしょうか?質問者さんの言う「データ」が何を指しているのか分かりませんでした。
    – merino
    2022年12月25日 14:30

0

この質問に回答するには、ログインする必要があります。

のタグが付いた他の質問を参照する。