[深層学習] タグが付いた質問
83
質問
6
票
2回答
303 件の閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
4
票
1回答
194 件の閲覧数
日本語で深層学習の用語
皆さん、おはようございます。
今履歴書は英語から日本語で翻訳しますのに、日本語はまだ上手じゃないですのが、知らない用語が沢山ありますけど、Wikipediaは助けてない所は多いですので、スタック・オーバーフローに聞いています。
知らない用語は英語で:
Viewpoint invariance
Combining multiple neural networks to improve ...
4
票
1回答
1,149 件の閲覧数
CNNで動物の顔を認識させるにあたり、活性化関数にはソフトマックスとシグモイドのどちらが良いですか?
私は現在ディープラーニングについて、とりわけ動物の顔認識について調査しているものです。ご指導ご鞭撻いただけないでしょうか。
私の現在のターゲットはCNNで動物の顔を認識させることです。(おそらく2クラス分類を想定しており、ある動物かそれ以外のすべてかに分類します。)いまの状況はImageNetのデータベースからその動物の写真をひっぱってきて顔の部分のみを切り出したものを500枚集めました。...
4
票
1回答
1,142 件の閲覧数
TensorFlowでDQN なぜかQ最大値が小さい
お世話になっております。
下記の記事を書いている者です。
機械学習の理論を理解せずに tensorflow で オセロ AI を作ってみた
今回お聞きしたいのは、
上記の オセロ AI の訓練時に Q_max が小さいまま 訓練されない
ソースは上記URLにリンクがあります。(ttps://github.com/sasaco/tf-dqn-reversi.git)
train.py ---...
2
票
2回答
4,560 件の閲覧数
tensorflowの勾配の値を取り出したい
現在deep learningを学習中の者で、pythonのtensorflowを使用しています。
tensorflowのウリとしては、optimizerにlossを渡せば勝手に最適化してくれることですが、その最適化途中のwの値や勾配の値を、見たり取り出したりすることはできないでしょうか?
また、一般的な最適化は重みの勾配さえわかれば問題ないのですが、...
2
票
0回答
115 件の閲覧数
TensorFlow学習モデルをブラウザ用に変換する際にエラーになる
ブラウザ上で動作する、多言語向けのニューラル機械翻訳を実装したいと思っています。
一般的な実装方法であればGoogleAPIにキーワードを渡して翻訳結果を受け取るものと思いますが、
事情により通信を介しての翻訳ができません。
そこで、下記手段により実現できないかどうかを考えております。
外部で学習したモデルをTensorflow.js用の形式に変換
Tensorflow....
2
票
1回答
92 件の閲覧数
GPUで半精度(Half Precision)で計算できる NVIDIA Volta GPUs は NVIDIA Tesla V100 だけですか?
深層学習で計算速度を上げるために半精度(Half Precision)での計算を行いたいです.
この論文の 4.1 によると, NVIDIA Volta GPUs というのが半精度での計算ができるようなのですが,具体的にどの種類のGPUが可能なのでしょうか.調べたところ, NVIDIA Tesla V100 がそれにあたるようなのですが,例えば GeForce GTX TITAN X や ...
2
票
1回答
75 件の閲覧数
Dockerを使った機械学習のトレーニング精度を良くしたい
Dockerを使って3種類の花の判別プログラム(.py)を作成しています。
プログラムを実行して8回のトレーニングを行いましたが、なぜかトレーニングうまくできませんでした。
これが学習の結果です。
lossもaccも一定の数値のままででした。
試しに、Dockerを使わずにそのままPythonプログラムを実行してみました。
トレーニングがうまく機能しました。
つまり、...
1
票
2回答
634 件の閲覧数
CNNによる動物の顔認識について
ターゲットを豚とします。豚と豚以外の識別(2クラス分類)をしたいので、それ以外にデータとして様々なものを用意して行います。このとき豚と豚以外のデータ数の比率は1:1とするでよいのでしょうか。あと豚以外として選定するデータとしてはどういった指標で選択するべきなのでしょうか。
1
票
1回答
475 件の閲覧数
ディープラーニングの解析結果が常に同じ値になります
売上個数予想のプログラムを作っていますが、
学習させた後MultiLayerNetwork.output(xxx)させた結果が常に同じ値になり困っています。
事前に学習データをAI.MaxInputStringLength(20)のパラメータに変換済みでそのサンプルが数万個あります。
つまり、入力は20のパラメータがあります。
今回は売上個数の予想なので出力は1つです。
(...
1
票
2回答
1万 件の閲覧数
オンライン学習、バッチ学習、ミニバッチ学習の違い
独学で深層学習を学び始めた初学者です。
表題の3種類の学習法について、以下の理解でよろしいでしょうか。
1000枚の訓練画像でエポック数20の場合、
・オンライン学習 - 1回の学習で全てのデータを使用するため、1エポック内で学習は1回
・バッチ学習 - 1枚ずつ重みの更新をするため、1エポック内で学習は1000回
・ミニバッチ学習 - バッチサイズ10の場合、...
1
票
1回答
160 件の閲覧数
ファインチューニングの精度向上について
ファインチューニングを行なっているのですが、今までvgg16の全結合層のみをいじりながら畳み込み層はフリーズさせていました。しかし、一度この畳み込み層もフリーズせずに学習可能にしたところもともと80パーセントほどだった精度が一気に90パーセントぐらいまで跳ね上がりました。これは正常な学習ができている状態なのでしょうか?どうにも不安です。
...
1
票
1回答
466 件の閲覧数
pythonでのfor文の高速化(numpyファイル処理)
pythonにて機械学習用に
「『行列をnumpy形式で保存したファイル(のペア)』を読み出し、行をランダムに入れ替えて、numpy形式で保存する。これを複数ファイル分行う」という処理をしています。
『行列をnumpy形式で保存したファイル(のペア)』の行列サイズは2000万×33と2000万×1で、ファイル数は10です。
こちらの処理を高速化したいのですが、以下コードの中で、...
1
票
1回答
615 件の閲覧数
Chainerでオートエンコーダーを作る際にTypeError: Unsupported type <class 'NoneType'>というエラー
Chainerをつかって、pythonで自己符号器をつくろうとしています。次のようなコードを書いて実行しました。
class Autoencoder(Chain):
def __init__(self):
super().__init__()
with self.init_scope():
self.l1 = L.Linear(3,2)
...
1
票
1回答
779 件の閲覧数
Pythonによるバッチ版Affineレイヤ(誤差逆伝播法)の実装方法について
Pythonによるバッチ版Affineレイヤを実装に関して不明な点がございましたので、質問させていただきました(参考書籍:「ゼロから作るDeepLearning」, pp.150-152)。
以下のバッチ版Affineレイアにおけるバイアスに関する
参考書籍での説明とソースコードについてご教示いただきたく存じます。
バイアスの加算に際しては、注意が必要です。順伝播でのバイアスの加算は、...
1
票
1回答
3,796 件の閲覧数
OpenPoseをGPUで動かそうとすると No module name 'cupy'
下記サイトを参考にopen poseを試しています。
https://github.com/DeNA/Chainer_Realtime_Multi-Person_Pose_Estimation/blob/master/README_JP.md
CPUでは問題なく動作したのですがあまりに動作が遅いためGPUで動作できるように試みてみましたが下記エラーが発生しました。よろしくお願いします。
...
1
票
1回答
1,602 件の閲覧数
pythonでTFlearnがインポートできないです。
Mac book で『初めてのTensorFlow』と言う本にしたがってTFlearnをインストールしたのですがいざpythonでインポートしようとすると下のような表示が出てしまいます。
解決方法をぜひ教えていただきたいです。
よろしくお願いします。
Shiraishi-Sadaaki-no-Macbook-ea:~ shiraishisadaaki$ python
Python 3.5.0 (...
1
票
2回答
4,022 件の閲覧数
darknet YOLOv3 GPU使用時のmakeについて
環境は
Ubuntu 16.04
CUDA 9.1
Opencv 3.3.0
YOLOv3をGPUを使って利用しようと考えたのですが、makeでエラーが出ます。
以下行ったこと
git clone https://github.com/pjreddie/darknet
cd darknet
vim Makefile #GPU=1, OPENCV=1に変更
make
エラー内容
gcc -...
1
票
1回答
1,563 件の閲覧数
Chainerを用いてCSVから学習し、入力用のCSVが有効か無効かを0か1で判定したい
はじめまして。ディープラーニングを初めて勉強する者です。
ディープラーニング自体触れたことのない分野で全くわからずの状態です。
とあるECサイトを想定して、ユーザーの購入履歴のCSVからChainerで購入履歴を学習させ、入力用のユーザーのCSVが買うか買わないかの判定を0, 1で行いたいと思っています。
ウェブ上でCSVを読み込むサンプルなどを見つけ、自分なりに書いてみたものの、...
1
票
1回答
4,767 件の閲覧数
Chainerでネットワークの途中でのデータの合成方法は?
Deep learningのChainerを使ってDeeplearningの勉強をしています。
その過程で、2つのデータを組み合わせることをやりたいのですが、やり方がわかりません。
具体的には、
def forward(x1,x2):
h1 = F.relu(model.l1(x1))
h2 = F.relu(model.l2(x2))
h = F.relu(...
1
票
1回答
575 件の閲覧数
ChainerによるDeep-Learning
実行環境はMAC OSX EL CAPITANでpyenvの上にanaconda2.4.0を導入したものです。
GPUはGeForceの下位モデルを搭載しており、CUDAは7.0です。
Chainerを用いてディープラーニングを行おうとしていますがうまく行きません。
http://qiita.com/hogefugabar/items/...
1
票
0回答
36 件の閲覧数
Backpropagation - softmax + cross_entroopy_log_loss 層からの勾配値をバッチサイズで割る理由
ゼロから作る Deep Learning 第六章の実装で、出力層(SoftmaxWithLoss)からの勾配値をバッチサイズで割り算していますが、これが必要な理由をお教えください。
全出力を合計したロス関数がバッチのすべての値の合計になるためバッチサイズで割る(cross_entropy_error function)のは理解できますが、逆伝播される勾配はバッチの合計値になっているのでしょうか?
...
1
票
1回答
123 件の閲覧数
kerasで2入力1出力のCNN設計をしたい
2枚の画像を入力して1つの出力を得る(分類される)CNNの設計を行っています。
具体的には,VGG16の特徴抽出層(重みは初期化しないでImagenetで学習済みのものを使用)を用いて2枚の画像から特徴を抽出し,それを全結合層で推論するネットワークです。
python3.6.4,keras2.3.1を使用しています。
ソースコードは以下の通りです。
from keras.models import ...
1
票
0回答
79 件の閲覧数
Kerasで_Merge が読み込めない
GoogleのColabで
from keras.layers.merge import _Merge
を実行しても、ImportError: cannot import name '_Merge'
と表示されうまくいきません。
2,3ヶ月前までは問題なかったのですが、最近colabの仕様がかわったのでしょうか?
...
1
票
0回答
62 件の閲覧数
Caffeを用いたGoogLeNetによる画像分類時にすべて同クラスに分類される
深層学習フレームワークCaffeを用いて2クラス分類を行っています。アルゴリズムはGoogLeNetです。
学習の結果、test_accuracyは約0.89となりました。
その後、pythonスクリプトで画像分類を行ったところ、全て同じクラスに分類されてしまいます。
訓練データ、テストデータ、いずれにも使用していないデータ、どれを使っても結果は同じです。
この原因は何でしょうか?...
1
票
1回答
123 件の閲覧数
ニューラルネットワークにおける「パラメータ」とは何を指している?
プログラミングというより仕組みの質問です。
機械学習における十の法則、つまり「ネットワークにおけるパラメータの数の10倍の学習データを用意しろ」という文における「パラメータ」がよくわかりません。
入力層のことでしょうか?
中間層の組み合わせの数のことでしょうか?
それ以外の自分が知らないようなことでしょうか?
答えとその少し詳しい説明をいただけると幸いです
1
票
1回答
193 件の閲覧数
PytorchでSeq2seqを設計したが、同じ単語ばかり出力される
PytorchでSeq2seqを使って文章の校正を行おうとしたのですが、
Decoderから同じ単語しか出力されません。
main.pyです。
これを実行すると訓練などもろもろを実行します。
#main.py
import copy
import torch
import torch.nn as nn
import torch.nn.functional as F
from torch....
1
票
0回答
47 件の閲覧数
RNNで文章生成モデルを作る際にたびたび発生する問題について
RNNで文章生成を行うと毎回出力文章の末尾の文字が連続してしまいます。
どのようなモデルを用いた場合でも発生します。
例:明日は晴れるといいなななななななななな
のような感じです。
この問題に遭遇した経験がある方、
もしくはこの問題の解決法を知っている方がいらしたら回答いただきたいです。
1
票
0回答
744 件の閲覧数
PytorchでのTransformerの実装に関して
こんにちは
TransformerをPytorchを利用して実装しようとしているのですが、
おもったような結果になりません。
以下が、訓練のコード、モデル定義のコード、データローダと出力結果のファイルです。
訓練のコード
Train.py
from transformer import EncoderDecoder, Encoder, LayerNorm, EncoderLayer, ...
1
票
1回答
65 件の閲覧数
画像判別AIモデルのloss率とacc率を良くしたい
うさぎとカメの判別AIの開発をしています。
しかし、なぜか学習がうまくいかず、lossやacc(判別成功率)の値が良くなりません。
通常、lossとaccは反比例で片方の数値が増加すればもう片方が減少するはずなのに、lossが膨大に増加してaccは0.5あたりで変化しません。
これはニューラルネットワークの設計がいけないのでしょうか??
以下に、スペックとソースコードと結果画面を載せます。
...
1
票
0回答
125 件の閲覧数
one pic error!
以下のサンプルスクリプトを実行しようとしていますが、トレーニング中の画像を出力するタイミングで、「one pic error!...」と表示され、画像が出力されません。
https://github.com/carpedm20/DCGAN-tensorflow
サンプルスクリプトではErrorが発生した関係で、以下2行の変更を加えているので
...
1
票
0回答
65 件の閲覧数
ビッグバンドの音源データセットが欲しいです
機械学習を行っている者です。
データセットにビッグバンドのパラ音源が欲しいのですが、普通のwav音源のようなデータセットが見つかりません…。
「Big Band music dataset」などで探しているのですが他に見つけるいい方法があるのでしょうか…?
1
票
0回答
48 件の閲覧数
深層学習モデルのandroidアプリへの活用
android studioを利用してアプリを作成する際にpythonで作成した深層学習の学習済みモデルをアプリに組み込む方法はありますか?
具体的には画像認識モデルをandroid上で動かしたいのですが
深層学習はkerasで作成しました
1
票
2回答
658 件の閲覧数
ディープラーニングにおいて、データ数が少ない場合の過学習が起きているかどうかの判断
CNNとRNNを組み合わせたモデルで動画分類を行っているのですが、訓練データがほぼ100%の正解率が出るのに対して、テストデータでは正解率が低いです。
ただ、過学習している時の典型的なグラフのようにテストデータの正解率が途中からどんどん下がるようなことは見られませんでした。
現在手元にあるデータ数は50程度で、かなり少なく、データ間の分散が比較的大きいです。
...
1
票
0回答
168 件の閲覧数
ResourceExhaustedErrorについて。(AutoEncoderの実装)
オートエンコーダー(AutoEncoder)について質問があり投稿しました。
初めての投稿で不備があったら教えて頂けると幸いです。
以下のプログラムを実装したのですが、今、横160縦120pixの画像を入力すると、「ResourceExhaustedError」が発生して、学習に進むことができません。
具体的には、130行目のところでErrorが発生します。
一方、...
1
票
0回答
154 件の閲覧数
深層学習におけるハイパパラメータの最適化の、パラメータ選定順序について
ネットワーク最適化の方法としてベストなハイパパラメータ(レイヤ層、ユニット数、学習係数等)の選定があります。これらの最適な値を探索する際に、どのパラメータから最適化し現在のモデルに当てはめるかが重要な意味をもつと思います。
例えばあるCNNに対して以下の探索を行うとします。
・最適な層数
・フィルタの次元(枚数、解像度)
・入力画像の解像度
・活性化関数
・学習アルゴリズム
...
0
票
1回答
7,180 件の閲覧数
DeepLearningとニューラルネットを使った人工知能を実装するための参考文献は?
自分で人工知能を実装したいと考えています。
DeepLearningとニューラルネットを実装したいです。
単回帰と木構造は理解しています。言語はC++ができます。
用途としては、ニューラルネットで文字識別を実装してみたいです。DeepLearningはどういうことに使えるか把握していない状態ですが、こちらも文字識別で動作確認をしたいです。
良い書籍やウェブサイトはありますか?
0
票
2回答
184 件の閲覧数
ゼロから作るDeep Learning
「ゼロから作るDeep Learning」でP.104の勾配を求める関数 numerical_gradient に関してです。
def f2(x):
return x[0]**2 + x[1]**2
def numerical_gradient(f, x):
h = 1e-4
grad = np.zeros_like(x)
for idx in range(...
0
票
1回答
90 件の閲覧数
データセットをバッチ処理したいが、、、
30万次元の要素をもつデータセット(data)を分析したいのですが、各バッチごとの要素をfor文でインスタンスに格納するときのコードを描こうと思ったら通りません。i番目のバッチが持つ1200個の要素をnew[i]に格納したいのですが、、分かりません。以下のようにしました。
for i in range(250):
new = []
new[i] = data[4000*i+1 : ...
0
票
2回答
1,531 件の閲覧数
dockerを利用したyolov3のmake エラーについて
Dockerfileに
FROM nvidia/cuda:9.0-runtime-ubuntu16.04
RUN apt-get update
RUN apt-get -y install python3-pip
RUN pip3 install keras tensorflow-gpu
このように記載してコンテナを立てて
git clone https://github.com/...
0
票
1回答
504 件の閲覧数
深層学習: 過学習について
現在、CNNのモデル3層レイヤ程度の小規模なもの(しかし各層でもつフィルタ数は多い)に対し、データ数(500枚程度)で学習させた結果認識率が100%(エラー0%)という結果になりました。データ数や、それに対するネットワークの複雑性から過学習が引き起こされました。これについて調べ、検証データを使用し学習と検証の曲線を調べればわかるということでした。
質問は、
・...
0
票
1回答
865 件の閲覧数
TypeError: data type not understood
以下のサンプルスクリプトを実行しようとしていますが、
https://github.com/carpedm20/DCGAN-tensorflow
以下コード部分でErrorが発生し実行できません。
(utils.py)
im = Image.fromarray(x[j:j+crop_h, i:i+crop_w])
return np.array(im.resize([resize_h, ...
0
票
1回答
198 件の閲覧数
ディープラーニングで出力される予想が常に一定の値
ディープラーニングはかなり駆け出しです。
機械学習については基礎の基礎を勉強した程度の無知です。
ディープラーニングで時系列の予想を行いたいのですが何をしても出力結果がほぼ一定の値になってしまします。
層の数を大きく変えても、活性化関数を見直して試行錯誤しても
学習後のモデルに何を渡してもほぼ一定の値を返すようになってしまいます。
...
0
票
1回答
80 件の閲覧数
cifar10_quick_train_testのプーリング層の出力が整数ではない
caffeのcifar10_quick_train_testでプーリング層の出力が
OH = (H-FH)/S + 1
(32-3)/2 + 1
29/2 + 1
以上のような計算になり
割り切れない数になると思うのですが、どのような処理が行われているのでしょうか?
https://github.com/BVLC/caffe/blob/master/examples/cifar10/...
0
票
1回答
279 件の閲覧数
深層学習の層数について
深層学習や転移学習では層を深くすればするほど原理的には予測精度は高くなるのでしょうか?
現在kerasのvgg16を用いてファインチューニングを行なっていますが全結合層を三層ほどにして学習した時より一層だけで学習した時の方が精度が高くなっています。深層学習や転移学習の強みは層を深くして複雑な問題に適応できるようになる事だと思うのですが、層が浅い方が精度が高くなるのは何故なんでしょう?
0
票
1回答
448 件の閲覧数
segnetの使い方について
Pythonで画像を領域ごとに分割しようとしたときに、segnetというモデルを使うとうまくいくという情報を聞いたので、Pythonでそれを動かしてみようと試みました。
しかし、以下のサイトでダウンロードしたフォルダにはファイルが様々に入っており、どれをどうすればプログラムが実行できるのかわかりません。
https://github.com/alexgkendall/caffe-segnet
...
0
票
1回答
332 件の閲覧数
深層学習における色の学習はされているのでしょうか?
深層学習においてRGB値などで画像を入力した場合、色情報に関する特徴抽出は第1層でしか行われないと思います。しかし、白黒画像から色画像の生成などができています。この点について知見がある方いましたら、教えていただけると幸いです。
0
票
1回答
890 件の閲覧数
TensorFlow object detection api SSD 転移学習: クラス数を変化させた時に学習済みモデルを使ったクラス層の重みの初期化はどのように行われているのか
Tensorflow object detection api でSSDモデルを学習させる時、fine-tune checkpointとして学習済みモデルを指定できますが、 feature-extractor にしか学習済みの重みは反映されず、feature-map 内の localization層と classification層の重みは初期化されているようでした。feature-map ...
0
票
1回答
1,383 件の閲覧数
ゼロから作るDeep Learning:定数関数の微分
オライリー・ジャパンの「ゼロから作る Deep Learning」という本についての質問です。
疑問は、「定数関数を微分してるから結果はゼロになるんじゃないか?」というものですが、とりあえず関数を見てください。本を持ってる人は、p.159ページです。
def loss(self, x, t):
y = self.predict(x)
return self.lastLayer....
0
票
1回答
1,313 件の閲覧数
TensorFlowにおけるバリデーション方法
TensorFlowにおけるバリデーションの方法がわかりません.
ここではIRISデータを学習することを考えます.
現在組んでいるプログラムは大まかに以下です.
import tensorflow as tf
labels = get_labels(dataset) #データ取得
data = get_data(dataset) #ラベル取得
train_data, test_data, ...