3
票
なぜ重みの初期値にnp.random.randnを用いるのか?
重み (Weight) の初期値をなぜ np.random.randn にするのか
ゼロから作るDeepLearning 6章を学ぶ 〜重みの初期値について〜 の記事が詳しいかも
勾配がゼロになると学習が進まなくなるので, 勾配損失が起きないような初期値を与えることは大切です
ニューラルネットワークの学習でしていること なども参考になるかも?
np.random.randnは「平均0、分散1(...
1
票
ニューラルネットワークの重み更新
数式、と言われていますが、ひとまずパラメータがない理由を説明できると思ったので、説明するだけします。
ロジスティック回帰は、特定の観測データたちがあらかじめ想定した確率分布に従うとして、その確率分布についてのパラメータをデータから最尤推定します。数学的に解けるので、パラメータはデータを与えれば一意に定まります。
ニューラルネットワークはずっと複雑な数式になって、...
1
票
承認済み
ChainerのTrainer実行時にエラーが出る
こんにちは。
NChainを定義して、モデルを読み込むときに損失関数が組み込まれていないため、
Updaterがバックプロップ出来ないのではないでしょうか?
具体的な損失関数はわかりませんが、例えば、softmax cross entropyで分類する場合、
model = NChain()
ではなく、
model = L.Classifier(NChain())
で解決すると思います。
1
票
Chainerでネットワークの途中でのデータの合成方法は?
chainer.functions.concatを使って下さい。引数axisでどの次元でconcatするかを指定できます。以下のサンプルを参考にしてみて下さい。
In [2]: x1 = chainer.Variable(numpy.array([[1, 2], [3, 4]]))
In [3]: x2 = chainer.Variable(numpy.array([[5, 6], [7, 8]...
無効化に投票