Skip to main content

次のタグが付いている話題の回答:

3

なぜ重みの初期値にnp.random.randnを用いるのか?

重み (Weight) の初期値をなぜ np.random.randn にするのか ゼロから作るDeepLearning 6章を学ぶ 〜重みの初期値について〜 の記事が詳しいかも 勾配がゼロになると学習が進まなくなるので, 勾配損失が起きないような初期値を与えることは大切です ニューラルネットワークの学習でしていること なども参考になるかも? np.random.randnは「平均0、分散1(...
oriri's user avatar
  • 6,160
1

ニューラルネットワークの重み更新

数式、と言われていますが、ひとまずパラメータがない理由を説明できると思ったので、説明するだけします。 ロジスティック回帰は、特定の観測データたちがあらかじめ想定した確率分布に従うとして、その確率分布についてのパラメータをデータから最尤推定します。数学的に解けるので、パラメータはデータを与えれば一意に定まります。 ニューラルネットワークはずっと複雑な数式になって、...
Yuki Inoue's user avatar
  • 1.7万
1
承認済み

ChainerのTrainer実行時にエラーが出る

こんにちは。 NChainを定義して、モデルを読み込むときに損失関数が組み込まれていないため、 Updaterがバックプロップ出来ないのではないでしょうか? 具体的な損失関数はわかりませんが、例えば、softmax cross entropyで分類する場合、 model = NChain() ではなく、 model = L.Classifier(NChain()) で解決すると思います。
hogehoge's user avatar
1

Chainerでネットワークの途中でのデータの合成方法は?

chainer.functions.concatを使って下さい。引数axisでどの次元でconcatするかを指定できます。以下のサンプルを参考にしてみて下さい。 In [2]: x1 = chainer.Variable(numpy.array([[1, 2], [3, 4]])) In [3]: x2 = chainer.Variable(numpy.array([[5, 6], [7, 8]...
takoika's user avatar
  • 712

無効化に投票