Skip to main content
Search type Search syntax
タグ [タグ]
完全一致 "ここの単語"
作成者 user:1234
user:me (あなたの)
スコア score:3 (3+)
score:0 (なし)
回答 answers:3 (3+)
answers:0 (なし)
isaccepted:yes
hasaccepted:no
inquestion:1234
閲覧数 views:250
コード code:"if (foo != bar)"
セクション title:リンゴ
body:"リンゴ オレンジ"
URL url:"*.example.com"
セーブ in:saves
状態 closed:yes
duplicate:no
migrated:no
wiki:no
種類 is:question
is:answer
除外 -[タグ]
-リンゴ
高度な検索の詳細については、ヘルプ ページをご覧ください
でタグ付けされた検索結果
検索オプション not deleted user 63432
1
1 回答
88 閲覧数

Tensorflowの設定で活性化関数にsigmoid等を指定して学習させた後、実際に使うと入力の値によらず出力が同じ値になる

下記のようなコードでサンプルデータの学習、およびランダムなデータで動作確認しています。 入力は変数7つで、いずれも出力値とある程度の相関があることは分かっていて、特にある程度のラインから大きくなっても出力値が頭打ちになることが分かっているので、活性化関数にsigmoidやtanhを指定した方がいいのではと思い、指定してみました。 すると、学習中に表示されるLossの値が途中から改善されず、プログラ …
晴空リウル's user avatar
0
承認済み

Tensorflowの設定で活性化関数にsigmoid等を指定して学習させた後、実際に使うと入力の値によらず出力が同じ値になる

結論から言うと、活性化関数はreluだけで十分に実用に耐えうるモデルが作成できました。 元々困っていた、「活性化関数にsigmoidやtanhを使用すると勾配消失問題にぶつかり、学習が進まなくなる」件については解決手法があるようですが、いずれも少し手間がかかるものと思われたため今回は試しませんでした。 今回の対応としては下記を行いました。 入力値を極力0~1程度に収められるよう正規化 学習データ …
晴空リウル's user avatar