[深層学習] タグが付いた質問
99
質問
6
票
1
回答
1,380
閲覧数
CNNにおいて奇数サイズのカーネルが推奨されるのはなぜですか
なぜCNNにおいて奇数サイズのカーネルが推奨されているかわかりません。
CNNにおいて、多くのページに「畳み込みのカーネルは3×3や7×7のような奇数サイズが好ましい」と書かれており、理由について「中心に画素が存在するため」などと書かれていますが、それ以上の説明がなく、納得できないままでいます。 入力画像サイズが(2n, 2n)の場合、奇数サイズのカーネルでストライドを2にして(n, n)...
5
票
1
回答
1,202
閲覧数
TensorFlowでDQN なぜかQ最大値が小さい
お世話になっております。
下記の記事を書いている者です。
機械学習の理論を理解せずに tensorflow で オセロ AI を作ってみた
今回お聞きしたいのは、
上記の オセロ AI の訓練時に Q_max が小さいまま 訓練されない
ソースは上記URLにリンクがあります。(ttps://github.com/sasaco/tf-dqn-reversi.git)
train.py ---...
4
票
1
回答
255
閲覧数
日本語で深層学習の用語
皆さん、おはようございます。
今履歴書は英語から日本語で翻訳しますのに、日本語はまだ上手じゃないですのが、知らない用語が沢山ありますけど、Wikipediaは助けてない所は多いですので、スタック・オーバーフローに聞いています。
知らない用語は英語で:
Viewpoint invariance
Combining multiple neural networks to improve ...
4
票
1
回答
1,354
閲覧数
CNNで動物の顔を認識させるにあたり、活性化関数にはソフトマックスとシグモイドのどちらが良いですか?
私は現在ディープラーニングについて、とりわけ動物の顔認識について調査しているものです。ご指導ご鞭撻いただけないでしょうか。
私の現在のターゲットはCNNで動物の顔を認識させることです。(おそらく2クラス分類を想定しており、ある動物かそれ以外のすべてかに分類します。)いまの状況はImageNetのデータベースからその動物の写真をひっぱってきて顔の部分のみを切り出したものを500枚集めました。...
4
票
2
回答
1,526
閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
2
票
2
回答
5,107
閲覧数
tensorflowの勾配の値を取り出したい
現在deep learningを学習中の者で、pythonのtensorflowを使用しています。
tensorflowのウリとしては、optimizerにlossを渡せば勝手に最適化してくれることですが、その最適化途中のwの値や勾配の値を、見たり取り出したりすることはできないでしょうか?
また、一般的な最適化は重みの勾配さえわかれば問題ないのですが、...
2
票
0
回答
192
閲覧数
TensorFlow学習モデルをブラウザ用に変換する際にエラーになる
ブラウザ上で動作する、多言語向けのニューラル機械翻訳を実装したいと思っています。
一般的な実装方法であればGoogleAPIにキーワードを渡して翻訳結果を受け取るものと思いますが、
事情により通信を介しての翻訳ができません。
そこで、下記手段により実現できないかどうかを考えております。
外部で学習したモデルをTensorflow.js用の形式に変換
Tensorflow....
1
票
2
回答
696
閲覧数
CNNによる動物の顔認識について
ターゲットを豚とします。豚と豚以外の識別(2クラス分類)をしたいので、それ以外にデータとして様々なものを用意して行います。このとき豚と豚以外のデータ数の比率は1:1とするでよいのでしょうか。あと豚以外として選定するデータとしてはどういった指標で選択するべきなのでしょうか。
1
票
1
回答
2,573
閲覧数
ディープラーニングの解析結果が常に同じ値になります
売上個数予想のプログラムを作っていますが、
学習させた後MultiLayerNetwork.output(xxx)させた結果が常に同じ値になり困っています。
事前に学習データをAI.MaxInputStringLength(20)のパラメータに変換済みでそのサンプルが数万個あります。
つまり、入力は20のパラメータがあります。
今回は売上個数の予想なので出力は1つです。
(...
1
票
2
回答
2万
閲覧数
オンライン学習、バッチ学習、ミニバッチ学習の違い
独学で深層学習を学び始めた初学者です。
表題の3種類の学習法について、以下の理解でよろしいでしょうか。
1000枚の訓練画像でエポック数20の場合、
・オンライン学習 - 1回の学習で全てのデータを使用するため、1エポック内で学習は1回
・バッチ学習 - 1枚ずつ重みの更新をするため、1エポック内で学習は1000回
・ミニバッチ学習 - バッチサイズ10の場合、...
1
票
1
回答
285
閲覧数
ファインチューニングの精度向上について
ファインチューニングを行なっているのですが、今までvgg16の全結合層のみをいじりながら畳み込み層はフリーズさせていました。しかし、一度この畳み込み層もフリーズせずに学習可能にしたところもともと80パーセントほどだった精度が一気に90パーセントぐらいまで跳ね上がりました。これは正常な学習ができている状態なのでしょうか?どうにも不安です。
...
1
票
1
回答
114
閲覧数
手書き数字のMNISTデータから1と2のデータだけを学習させたい。
手書き数字の画像データセットはデフォルトでは1から10まであります。
その中から1と2だけを取り出し、1と2の分類だけを行えるようにしたいです。
次のような手順で進めました。
・1と2の画像データ、画像ラベルを取り出す
・取り出した画像データをリストに置き換え、画像データと画像ラベルをそれぞれ一つにまとめてからnumpy配列に戻す
・適当な学習モデルを作り、出力を(2)にして学習を実行する
...
1
票
1
回答
159
閲覧数
PyTorchでの損失関数と最適化アルゴリズムの結びつけについて
DLの学習時には、モデルを使って予測を出す→損失関数で損失を計算→損失関数を最適化アルゴリズムに(逆伝播&パラメータ更新)という流れだと思うのですが、これをPyTorchを行う時、「この最適化アルゴリズムでこの損失関数を最適化するよ」という情報の結びつけは自動的に行われるのでしょうか?
具体的には、以下にあるように
# 正しいコード
# 交差エントロピー誤差関数
loss_fnc = nn....
1
票
2
回答
669
閲覧数
二値分類問題をディープラーニングで解く際にうまく学習されない
入力されたxとyの値から0か1かを分類できるようにニューラルネットワークを学習させようとしているのですが、何度回してもうまく学習できません。
どうすればよいのか教えていただけると幸いです。
import numpy as np
def sigmoid(x):
return 1 / (1 + np.exp(-x))
def sigmoid_grad(x):
return (1....
1
票
1
回答
570
閲覧数
PytorchでSeq2seqを設計したが、同じ単語ばかり出力される
PytorchでSeq2seqを使って文章の校正を行おうとしたのですが、
Decoderから同じ単語しか出力されません。
main.pyです。
これを実行すると訓練などもろもろを実行します。
#main.py
import copy
import torch
import torch.nn as nn
import torch.nn.functional as F
from torch....
1
票
1
回答
699
閲覧数
Chainerでオートエンコーダーを作る際にTypeError: Unsupported type <class 'NoneType'>というエラー
Chainerをつかって、pythonで自己符号器をつくろうとしています。次のようなコードを書いて実行しました。
class Autoencoder(Chain):
def __init__(self):
super().__init__()
with self.init_scope():
self.l1 = L.Linear(3,2)
...
1
票
2
回答
2,391
閲覧数
ディープラーニングにおいて、データ数が少ない場合の過学習が起きているかどうかの判断
CNNとRNNを組み合わせたモデルで動画分類を行っているのですが、訓練データがほぼ100%の正解率が出るのに対して、テストデータでは正解率が低いです。
ただ、過学習している時の典型的なグラフのようにテストデータの正解率が途中からどんどん下がるようなことは見られませんでした。
現在手元にあるデータ数は50程度で、かなり少なく、データ間の分散が比較的大きいです。
...
1
票
1
回答
1,085
閲覧数
Pythonによるバッチ版Affineレイヤ(誤差逆伝播法)の実装方法について
Pythonによるバッチ版Affineレイヤを実装に関して不明な点がございましたので、質問させていただきました(参考書籍:「ゼロから作るDeepLearning」, pp.150-152)。
以下のバッチ版Affineレイアにおけるバイアスに関する
参考書籍での説明とソースコードについてご教示いただきたく存じます。
バイアスの加算に際しては、注意が必要です。順伝播でのバイアスの加算は、...
1
票
1
回答
5,474
閲覧数
OpenPoseをGPUで動かそうとすると No module name 'cupy'
下記サイトを参考にopen poseを試しています。
https://github.com/DeNA/Chainer_Realtime_Multi-Person_Pose_Estimation/blob/master/README_JP.md
CPUでは問題なく動作したのですがあまりに動作が遅いためGPUで動作できるように試みてみましたが下記エラーが発生しました。よろしくお願いします。
...
1
票
1
回答
1,906
閲覧数
pythonでTFlearnがインポートできないです。
Mac book で『初めてのTensorFlow』と言う本にしたがってTFlearnをインストールしたのですがいざpythonでインポートしようとすると下のような表示が出てしまいます。
解決方法をぜひ教えていただきたいです。
よろしくお願いします。
Shiraishi-Sadaaki-no-Macbook-ea:~ shiraishisadaaki$ python
Python 3.5.0 (...
1
票
2
回答
5,187
閲覧数
darknet YOLOv3 GPU使用時のmakeについて
環境は
Ubuntu 16.04
CUDA 9.1
Opencv 3.3.0
YOLOv3をGPUを使って利用しようと考えたのですが、makeでエラーが出ます。
以下行ったこと
git clone https://github.com/pjreddie/darknet
cd darknet
vim Makefile #GPU=1, OPENCV=1に変更
make
エラー内容
gcc -...
1
票
1
回答
1,580
閲覧数
Chainerを用いてCSVから学習し、入力用のCSVが有効か無効かを0か1で判定したい
はじめまして。ディープラーニングを初めて勉強する者です。
ディープラーニング自体触れたことのない分野で全くわからずの状態です。
とあるECサイトを想定して、ユーザーの購入履歴のCSVからChainerで購入履歴を学習させ、入力用のユーザーのCSVが買うか買わないかの判定を0, 1で行いたいと思っています。
ウェブ上でCSVを読み込むサンプルなどを見つけ、自分なりに書いてみたものの、...
1
票
1
回答
4,982
閲覧数
Chainerでネットワークの途中でのデータの合成方法は?
Deep learningのChainerを使ってDeeplearningの勉強をしています。
その過程で、2つのデータを組み合わせることをやりたいのですが、やり方がわかりません。
具体的には、
def forward(x1,x2):
h1 = F.relu(model.l1(x1))
h2 = F.relu(model.l2(x2))
h = F.relu(...
1
票
1
回答
587
閲覧数
ChainerによるDeep-Learning
実行環境はMAC OSX EL CAPITANでpyenvの上にanaconda2.4.0を導入したものです。
GPUはGeForceの下位モデルを搭載しており、CUDAは7.0です。
Chainerを用いてディープラーニングを行おうとしていますがうまく行きません。
http://qiita.com/hogefugabar/items/...
1
票
0
回答
66
閲覧数
ResNet50の転移学習にて、想定した形状のTensorが出力できない
pretrain済みのResNet50の構造を変更して利用したいのですが、
変更後のモデルから、想定していたような形状の出力が得られません。
次のコードで、
モデルの構造を変更し,torchinfoで確認すると
def Custom_ResNet50():
model=torchvision.models.resnet50(pretrained=True)
model....
1
票
0
回答
133
閲覧数
tiny-dnnで学習,生成したjson形式のネットワークファイルをUnityで使いたい
tiny-dnn(C++)で学習、生成したjson形式のネットワークファイルがあるのですが、これをUnity(C#)で使いたいです。
どのような方法があるでしょうか?
なるべく無償の範囲でできると嬉しいです。
tiny-dnnのネットワークファイルをそのまま使えるのが理想ですが、
必要ならばなにがしかの変換をかけてUnityで使えるようにするなども選択肢としてありです。
1
票
0
回答
57
閲覧数
RNNで文章生成モデルを作る際にたびたび発生する問題について
RNNで文章生成を行うと毎回出力文章の末尾の文字が連続してしまいます。
どのようなモデルを用いた場合でも発生します。
例:明日は晴れるといいなななななななななな
のような感じです。
この問題に遭遇した経験がある方、
もしくはこの問題の解決法を知っている方がいらしたら回答いただきたいです。
1
票
0
回答
1,654
閲覧数
PytorchでのTransformerの実装に関して
こんにちは
TransformerをPytorchを利用して実装しようとしているのですが、
おもったような結果になりません。
以下が、訓練のコード、モデル定義のコード、データローダと出力結果のファイルです。
訓練のコード
Train.py
from transformer import EncoderDecoder, Encoder, LayerNorm, EncoderLayer, ...
1
票
1
回答
85
閲覧数
Dockerを使った機械学習のトレーニング精度を良くしたい
Dockerを使って3種類の花の判別プログラム(.py)を作成しています。
プログラムを実行して8回のトレーニングを行いましたが、なぜかトレーニングうまくできませんでした。
これが学習の結果です。
lossもaccも一定の数値のままででした。
試しに、Dockerを使わずにそのままPythonプログラムを実行してみました。
トレーニングがうまく機能しました。
つまり、...
1
票
1
回答
387
閲覧数
画像判別AIモデルのloss率とacc率を良くしたい
うさぎとカメの判別AIの開発をしています。
しかし、なぜか学習がうまくいかず、lossやacc(判別成功率)の値が良くなりません。
通常、lossとaccは反比例で片方の数値が増加すればもう片方が減少するはずなのに、lossが膨大に増加してaccは0.5あたりで変化しません。
これはニューラルネットワークの設計がいけないのでしょうか??
以下に、スペックとソースコードと結果画面を載せます。
...
1
票
0
回答
56
閲覧数
深層学習モデルのandroidアプリへの活用
android studioを利用してアプリを作成する際にpythonで作成した深層学習の学習済みモデルをアプリに組み込む方法はありますか?
具体的には画像認識モデルをandroid上で動かしたいのですが
深層学習はkerasで作成しました
1
票
0
回答
214
閲覧数
ResourceExhaustedErrorについて。(AutoEncoderの実装)
オートエンコーダー(AutoEncoder)について質問があり投稿しました。
初めての投稿で不備があったら教えて頂けると幸いです。
以下のプログラムを実装したのですが、今、横160縦120pixの画像を入力すると、「ResourceExhaustedError」が発生して、学習に進むことができません。
具体的には、130行目のところでErrorが発生します。
一方、...
1
票
0
回答
168
閲覧数
深層学習におけるハイパパラメータの最適化の、パラメータ選定順序について
ネットワーク最適化の方法としてベストなハイパパラメータ(レイヤ層、ユニット数、学習係数等)の選定があります。これらの最適な値を探索する際に、どのパラメータから最適化し現在のモデルに当てはめるかが重要な意味をもつと思います。
例えばあるCNNに対して以下の探索を行うとします。
・最適な層数
・フィルタの次元(枚数、解像度)
・入力画像の解像度
・活性化関数
・学習アルゴリズム
...
0
票
1
回答
7,244
閲覧数
DeepLearningとニューラルネットを使った人工知能を実装するための参考文献は?
自分で人工知能を実装したいと考えています。
DeepLearningとニューラルネットを実装したいです。
単回帰と木構造は理解しています。言語はC++ができます。
用途としては、ニューラルネットで文字識別を実装してみたいです。DeepLearningはどういうことに使えるか把握していない状態ですが、こちらも文字識別で動作確認をしたいです。
良い書籍やウェブサイトはありますか?
0
票
2
回答
230
閲覧数
ゼロから作るDeep Learning
「ゼロから作るDeep Learning」でP.104の勾配を求める関数 numerical_gradient に関してです。
def f2(x):
return x[0]**2 + x[1]**2
def numerical_gradient(f, x):
h = 1e-4
grad = np.zeros_like(x)
for idx in range(...
0
票
1
回答
145
閲覧数
これは" 過学習" 現象なのでしょうか?
構成の異なるNeural Network(NN)AとBを同じ訓練データ(batch)で同時に訓練していく場合,いつも前半ではBの推論精度がAより非常に良いのですが、途中からBの進化の速度がダウンしてだんだん推論精度がAに抜かれてしまう現象です。
下記のような3つのoptimizerを同じ訓練ループの中で試しています 。
## 一つ目
optimizer = AdaBound( model....
0
票
1
回答
151
閲覧数
簡単なニューラルネットワークにおいて誤差が突然0になって学習が止まる現象について~ Numpyの数値の型との因果関係~
初めまして.私は今,「ゼロから始めるdeep learning 1巻」を学んでいます.そこでGoogle Colbにて早速自分でコードを作ってみたのですが,runを押すと全く同じデータでもうまく類推できるときと,(誤差関数が突然0になるせいで)学習が止まる時があります.そして色々動かしているうちに,Numpyの中で数値演算の時に何かしら異常があると思い至りました.以下,ソースコードを添付します....
0
票
1
回答
2,028
閲覧数
Keras の validation_split は交差検証でしょうか?
Pythonを独学で勉強しているものです。
Kerasのコードで、
model.fit(x_train, y_train, verbose=1, validation_split=0.2, shuffle=True, epochs=20000)
とした時、80%のデータが学習用に使用され、20%のデータがバリデーションに使用される、...
0
票
1
回答
104
閲覧数
データセットをバッチ処理したいが、、、
30万次元の要素をもつデータセット(data)を分析したいのですが、各バッチごとの要素をfor文でインスタンスに格納するときのコードを描こうと思ったら通りません。i番目のバッチが持つ1200個の要素をnew[i]に格納したいのですが、、分かりません。以下のようにしました。
for i in range(250):
new = []
new[i] = data[4000*i+1 : ...
0
票
2
回答
2,060
閲覧数
dockerを利用したyolov3のmake エラーについて
Dockerfileに
FROM nvidia/cuda:9.0-runtime-ubuntu16.04
RUN apt-get update
RUN apt-get -y install python3-pip
RUN pip3 install keras tensorflow-gpu
このように記載してコンテナを立てて
git clone https://github.com/...
0
票
1
回答
551
閲覧数
深層学習: 過学習について
現在、CNNのモデル3層レイヤ程度の小規模なもの(しかし各層でもつフィルタ数は多い)に対し、データ数(500枚程度)で学習させた結果認識率が100%(エラー0%)という結果になりました。データ数や、それに対するネットワークの複雑性から過学習が引き起こされました。これについて調べ、検証データを使用し学習と検証の曲線を調べればわかるということでした。
質問は、
・...
0
票
1
回答
2,804
閲覧数
commonモジュールをimportしたい
「ゼロから作るディープラーニング」という本を読んで勉強しています。
読み進めていくとcommonというモジュールをインポートすることになるのですが、ここで以下のエラーが発生します。
ModuleNotFoundError: No module named 'common'
commonモジュールというものをインストールしようとしたのですがそもそもこれ自体一般公開されているものではないらしく、...
0
票
1
回答
446
閲覧数
torch.autograd.gradが0またはNoneTypeになってしまう
以下のコード中のtorch.autograd.gradの偏微分の計算で,Noneになってしまいます.
torch.autograd.gradの中身を見ることが出来ませんので,偏微分の計算中に何かしら問題が起こっている?と思いますが,どうなっているかがいまだに不明です.
なお,torch.autograd.gradで用いられるlossとparams.values()はきちんと値が出力されます.
...
0
票
1
回答
178
閲覧数
深層学習のモデルを使ったアプリケーションの作成方法
デスクトップアプリケーションとして配布を考えています。
その際、画像や音声を入力にディープラーニングのモデルを利用する予定です。
pyinstaller のようなPython コードを実行ファイルへ変換するのではなく
C++やC# などの言語ですべての処理をローカルのGPU(AMD,Nvidia)上で実行するソフトウェアの開発を行う予定です。
Tensorflow ...
0
票
1
回答
970
閲覧数
pythonでのfor文の高速化(numpyファイル処理)
pythonにて機械学習用に
「『行列をnumpy形式で保存したファイル(のペア)』を読み出し、行をランダムに入れ替えて、numpy形式で保存する。これを複数ファイル分行う」という処理をしています。
『行列をnumpy形式で保存したファイル(のペア)』の行列サイズは2000万×33と2000万×1で、ファイル数は10です。
こちらの処理を高速化したいのですが、以下コードの中で、...
0
票
1
回答
1,510
閲覧数
TypeError: data type not understood
以下のサンプルスクリプトを実行しようとしていますが、
https://github.com/carpedm20/DCGAN-tensorflow
以下コード部分でErrorが発生し実行できません。
(utils.py)
im = Image.fromarray(x[j:j+crop_h, i:i+crop_w])
return np.array(im.resize([resize_h, ...
0
票
1
回答
573
閲覧数
ディープラーニングで出力される予想が常に一定の値
ディープラーニングはかなり駆け出しです。
機械学習については基礎の基礎を勉強した程度の無知です。
ディープラーニングで時系列の予想を行いたいのですが何をしても出力結果がほぼ一定の値になってしまします。
層の数を大きく変えても、活性化関数を見直して試行錯誤しても
学習後のモデルに何を渡してもほぼ一定の値を返すようになってしまいます。
...
0
票
1
回答
154
閲覧数
cifar10_quick_train_testのプーリング層の出力が整数ではない
caffeのcifar10_quick_train_testでプーリング層の出力が
OH = (H-FH)/S + 1
(32-3)/2 + 1
29/2 + 1
以上のような計算になり
割り切れない数になると思うのですが、どのような処理が行われているのでしょうか?
https://github.com/BVLC/caffe/blob/master/examples/cifar10/...
0
票
1
回答
412
閲覧数
深層学習の層数について
深層学習や転移学習では層を深くすればするほど原理的には予測精度は高くなるのでしょうか?
現在kerasのvgg16を用いてファインチューニングを行なっていますが全結合層を三層ほどにして学習した時より一層だけで学習した時の方が精度が高くなっています。深層学習や転移学習の強みは層を深くして複雑な問題に適応できるようになる事だと思うのですが、層が浅い方が精度が高くなるのは何故なんでしょう?
0
票
1
回答
541
閲覧数
segnetの使い方について
Pythonで画像を領域ごとに分割しようとしたときに、segnetというモデルを使うとうまくいくという情報を聞いたので、Pythonでそれを動かしてみようと試みました。
しかし、以下のサイトでダウンロードしたフォルダにはファイルが様々に入っており、どれをどうすればプログラムが実行できるのかわかりません。
https://github.com/alexgkendall/caffe-segnet
...