Search type | Search syntax |
---|---|
タグ | [タグ] |
完全一致 | "ここの単語" |
作成者 |
user:1234 user:me (あなたの) |
スコア |
score:3 (3+) score:0 (なし) |
回答 |
answers:3 (3+) answers:0 (なし) isaccepted:yes hasaccepted:no inquestion:1234 |
閲覧数 | views:250 |
コード | code:"if (foo != bar)" |
セクション |
title:リンゴ body:"リンゴ オレンジ" |
URL | url:"*.example.com" |
セーブ | in:saves |
状態 |
closed:yes duplicate:no migrated:no wiki:no |
種類 |
is:question is:answer |
除外 |
-[タグ] -リンゴ |
高度な検索の詳細については、ヘルプ ページをご覧ください。 |
1
票
1
回答
88
閲覧数
Tensorflowの設定で活性化関数にsigmoid等を指定して学習させた後、実際に使うと入力の値によらず出力が同じ値になる
下記のようなコードでサンプルデータの学習、およびランダムなデータで動作確認しています。
入力は変数7つで、いずれも出力値とある程度の相関があることは分かっていて、特にある程度のラインから大きくなっても出力値が頭打ちになることが分かっているので、活性化関数にsigmoidやtanhを指定した方がいいのではと思い、指定してみました。
すると、学習中に表示されるLossの値が途中から改善されず、プログラ …
0
票
承認済み
Tensorflowの設定で活性化関数にsigmoid等を指定して学習させた後、実際に使うと入力の値によらず出力が同じ値になる
結論から言うと、活性化関数はreluだけで十分に実用に耐えうるモデルが作成できました。
元々困っていた、「活性化関数にsigmoidやtanhを使用すると勾配消失問題にぶつかり、学習が進まなくなる」件については解決手法があるようですが、いずれも少し手間がかかるものと思われたため今回は試しませんでした。
今回の対応としては下記を行いました。
入力値を極力0~1程度に収められるよう正規化
学習データ …