[機械学習] タグが付いた質問
194
件の質問
1
票
2
回答
666
閲覧数
なぜ重みの初期値にnp.random.randnを用いるのか?
質問1
「ゼロから作るディープラーニング」を勉強していて、182pのところを読んでいたら、そもそもなんで、重みWの初期値を今までnp.random.randnというものにしていたのかがわからなくなりました。なのでなぜnp.random.randnを重みの初期値にするのかを教えていただきたいです。
質問2
np.random.randnは「平均0、分散1(標準偏差1)の正規分布(標準正規分布)...
0
票
1
回答
272
閲覧数
機械学習でsin波を学習させた際のずれについて
機械学習初心者です。
sin波を機械学習で予想させようと思い、下記サイトを参考にプログラムを組んでみました。
https://www.ai-lab.app/169/
発展として、周期を連続的に予測させようと思いました。
方法としては次の値を予想させるために前5個分のデータを読み込ませて予想している感じです。そのようにプログラムしているつもりです。
まずは2周期目だけ予想させようと思ったのですが、...
0
票
1
回答
199
閲覧数
深層学習のモデルを使ったアプリケーションの作成方法
デスクトップアプリケーションとして配布を考えています。
その際、画像や音声を入力にディープラーニングのモデルを利用する予定です。
pyinstaller のようなPython コードを実行ファイルへ変換するのではなく
C++やC# などの言語ですべての処理をローカルのGPU(AMD,Nvidia)上で実行するソフトウェアの開発を行う予定です。
Tensorflow ...
1
票
2
回答
2,920
閲覧数
ディープラーニングにおいて、データ数が少ない場合の過学習が起きているかどうかの判断
CNNとRNNを組み合わせたモデルで動画分類を行っているのですが、訓練データがほぼ100%の正解率が出るのに対して、テストデータでは正解率が低いです。
ただ、過学習している時の典型的なグラフのようにテストデータの正解率が途中からどんどん下がるようなことは見られませんでした。
現在手元にあるデータ数は50程度で、かなり少なく、データ間の分散が比較的大きいです。
...
0
票
1
回答
2,620
閲覧数
Python3 保存済みモデルの読み込み時に「Cannot create group in read only mode.」のエラーが出る
保存したVAEの学習済みモデルを新しいデータ(normal画像、anomal画像)に使いたいと考えています。
以下の通りload_modelで読み込んだのですが、「Cannot create group in read only mode.」というエラーが出てうまく読み込む事が出来ませんでした。
色々ネットで調べたところ、...
0
票
1
回答
105
閲覧数
Logistic Regressionで実装しましたが,accuracyが20パーセント台と低いです.
Logistic Regressionによるニューラルネットを実装したのですが,その正解率が低すぎるので,直したいです.
入力xはshape(1,64)でyはラベルでshape(1,6)の配列です.バッチサイズやニューロンの数を変えたりと,ハイパラメータを変えてみたのですが,正答率が上がりませんでした.どなたか,正答率を上げるために,どのような方法がいいでしょうか,ご教示の程,...
0
票
1
回答
940
閲覧数
transformersからTFGPT2LMHeadModelをインポートできない (cannot import name 'TFGPT2LMHeadModel' from 'transformers')
Huggingface Transformers 入門 (6) - テキスト生成
こちらの記事を真似てコードを動かしていますが、最初の
import tensorflow as tf
from transformers import TFGPT2LMHeadModel, GPT2Tokenizer
で以下のエラーが出ます
-------------------------------------...
0
票
0
回答
89
閲覧数
Face++APIの処理をフォルダ内の画像すべてに行えるようにしたい
Face++のdetectAPIを使ってフォルダ内の画像すべてに処理を行い、その結果を1つのcsvファイルに保存するプログラムを完成させたいです。
公式ドキュメントでは画像一枚だけに処理を行うコードが書かれているのですがそれを改変して書こうとしています。
機械学習用の画像データセットを作ろうと思い、
①画像をスクレイピングにて一括取得。
②取得した画像をカスケードファイルにて顔部分だけにリサイズ
...
1
票
1
回答
344
閲覧数
交差検証(クロス・バリデーション)を適応して意味のあるアルゴリズムについて
モデル評価にクロスバリデーションをよく使うのですが、
決定木のようなバリアンスの大きいアルゴリズムについては、クロスバリデーションによる評価が意味のあるものかどうか、いつも疑問を抱いて行っています。
そもそもクロスバリデーションは最適なハイパーパラメータを探索することを目的にしていると思っているのですが、最終的なアウトプットとしてのモデルを評価するには、...
0
票
1
回答
611
閲覧数
PyTorchでのloss関数自作時に出力ベクトル以外の変数も使いたい
PyTorchで機械学習を行っているのですが、loss関数を自作したいと思っています。
今のところ学習用のデータx_train, x_test, y_train, y_testは作成方法として
(1) DNNへの入力データ
Data_A(サイズ[10000,200])→処理1(不可逆変換)→Data_X(サイズ[10000,200])
(2) DNNからの出力データ
Data_A(サイズ[...
0
票
1
回答
273
閲覧数
機械学習の可視化のグラフの見方
ちらほら見かける機械学習の結果を可視化したグラフで横軸エポック数,縦軸MSE?になっているものをよく見かけます.
この二つの線の意味としてはトレーニングデータをトレーニングデータで学習したものでテストした場合のMSEと,テストデータをトレーニングデータで学習したものでテストした場合のMSEという見方であっていますか?
0
票
1
回答
1,314
閲覧数
KerasでLSTMをしようとしているが、エラーが出てしまう。
3次元のデータと1次元の正解データをLSTMで学習させようとしているが、エラーが出てしまします。
どうすればよいでしょうか?
コードに問題があったため少し変更しました。
参考にしたものはこちらです。
http://sweng.web.fc2.com/ja/program/python/time-series-forecast-lstm.html
import numpy as np
from ...
1
票
1
回答
264
閲覧数
pytorchのoutputについて
以下のプログラムは手書き数字データセットMNISTを10クラスに識別するものです。
正解数と識別率をevaluate関数で求めているのですが、どのデータがどのクラスに分類されたかを調べるために混同行列を用いてみました。しかし、このプログラムを実行すると、ncorrectの値と混同行列の体格成分の和が一致しません。どうすれば一致するでしょうか。
学習用プログラム
import os
import ...
0
票
0
回答
4,179
閲覧数
Pythonでエラーが出てしまう: IndexError: index 100 is out of bounds for dimension 0 with size 100
下記のプログラムを実行すると、エラーメッセージが出てしまいます。
実装したいこととしては、Aを混同行列としてA[pred[i]][y[i]]に1を足しこみたいです。
エラーメッセージ:
File "cnnTm.py", line 61, in <module>
lossT, accT, ncorrectT = cnnL.evaluate(model, XT,...
0
票
1
回答
1,959
閲覧数
kerasで2入力1出力のCNN設計をしたい
2枚の画像を入力して1つの出力を得る(分類される)CNNの設計を行っています。
具体的には,VGG16の特徴抽出層(重みは初期化しないでImagenetで学習済みのものを使用)を用いて2枚の画像から特徴を抽出し,それを全結合層で推論するネットワークです。
python3.6.4,keras2.3.1を使用しています。
ソースコードは以下の通りです。
from keras.models import ...
0
票
1
回答
103
閲覧数
scikit-learnで偽陽性だったもの(データの配列番号)を出力して確認するにはどうすればよいでしょうか?
実装は以下のサイトのものをそのまま使用しました.
https://www.haya-programming.com/entry/2018/02/22/234011
混同行列(confusion_matrix)が以下のようになったため,どのデータが分類に失敗したのかが気になります.
[[1699 1]
[ 0 1936]]
...
4
票
1
回答
190
閲覧数
複数日本語文章の分類の簡単な実装方法について
文章の分類方法のメリットデメリットを教えてください。
■インプット
・200文字程度の複数の日本語文章
・分類先(恋愛、ホラー、サスペンスなど、予め10個程度定義)
■アウトプット
文章A -> 恋愛
文章B -> サスペンス
文章C -> ホラー
、、、
■分類方法
ちょっと調べたところ下のような方法が、
機械学習周りが素人の自分(ただのRailsエンジニア)...
0
票
1
回答
515
閲覧数
分類モデルの作成
分類モデルの作成をしてまして、モデルの選択
ロジスティック回帰と決定木、ランダムフォレスト、SVMの4つのモデルを作成して比較で # for文でリストからモデルを取り出し、学習と予測、F1値の出力を行う。為のコードがどうしてもわからなく悩んでいます。ご教示お願い致します。
コード
import numpy as np
import matplotlib.pyplot as plt
import ...
0
票
1
回答
655
閲覧数
色空間と表色系の違いは?
私は機械学習に関する研究を行っています。
色を表す方法として「色空間」という用語を使っている論文と「表色系」という用語を使っている論文があると思います。どちらがより正しい用語なのでしょうか。
私は「色を数字に変換するシステム」を表しているので、「表色系」の方が正確だと考えています。
0
票
0
回答
201
閲覧数
pytorchで作ったCNNが学習しません
以下のようなCNNをpythonで作成したのですが、計算を回したところlossの値が変化しませんでした。
原因がわからないのですが、教えていただけないでしょうか?
from torch.nn import MSELoss
device = 'cuda'
model = Model().to(device)
criterion = MSELoss()
optimizer = Adam(model....
1
票
1
回答
629
閲覧数
手の姿勢推定における学習データのラベル付け
現在単視点RGB画像から手の姿勢推定を行いたくて、機械学習でやろうと思っています。
関節の位置をラベルとしてつけるイメージです。
このラベルなのですが、配列は学習データとして取り入れられるのでしょうか?
出力は推定される関節の位置で、これを手モデルに合成できればいいかなと思います。
機械学習の経験が浅く、どう学習データを作るのかがわかりません。ご教授頂けると幸いです。
追記 (具体的な方法): ...
0
票
1
回答
191
閲覧数
DCGANの実装のpaddingに関して
現在DCGANをkerasで実装しようとしているのですが、generatorの最初ところ(1024,4,4)を(1,1)の大きさのカーネルをストライド5で(512,8,8)へ逆畳み込みしていますよね?
kerasのConv2DTransposeを使おうと思っているのですが、その際、paddingはsameかvalidどのようにしたらいいですか?また(4,4)...
0
票
1
回答
473
閲覧数
tslearnを用いた時のResumed because of empty clusterについて
tslearnによるKShapeという分類手法を用いた時に、「Resumed because of empty cluster」と表記されます。
この場合、使っているデータセットの問題なのでしょうか、それとも学習回数など改善することによってうまく分類できるようになるのでしょうか。
アドバイスをいただきたいです。
よろしくお願いいたします。
from tslearn.clustering ...
3
票
2
回答
7,793
閲覧数
ベイズ最適化と遺伝的アルゴリズムと強化学習の違い
これらの最適化にかかる時間, 最適化の拡張性の違いはなんですか?
またそれぞれの強みはなんですか?
※拡張性は例えば値のみしか最適化できないなど
1
票
2
回答
1,092
閲覧数
時系列の特徴量の作成の仕方
機械学習における、時系列の特徴量作成に関して質問です。
以下の添付した画像から、例えば
・Morning直後はある値が増加傾向にある。
・NoonもMorningと比べて大きな変化量はないが、増加傾向にある。
・Eveningも大きな変化量はないが、増加傾向にある。
こういった事実現象を時系列の特徴量として、表現するにはどういった方法がありますでしょうか
機械学習に精通している皆様方、...
1
票
0
回答
365
閲覧数
tiny-yolov3の学習済みモデルをcoremlモデルに変換
前提・実現したいこと
tiny-yolov3の学習済みモデルをkerasモデルに変換しそのモデルをcoremlモデル(mlmodel)に変換をしようとしています。
iosアプリでtiny-yolov3の学習モデルを用いて物体の座標を検出させるアプリを作っています。ですがiosでtiny-yolov3の学習済みモデルを直接使用することはできないのでcoremlモデルに変換する必要があります。...
0
票
1
回答
3,303
閲覧数
windows環境でcondaにpytorchが入りません
anaconda環境にpytorchをインストールしようとしているのですが、何度試してもimportエラーが出てしまいます。
anacondaで仮想環境を作り、焼ているのですが、下記のような結果になってしまいます
(nn) C:\Users\USER>conda install pytorch torchvision -c pytorch
Collecting package ...
0
票
1
回答
380
閲覧数
kerasとscikit-learnによるaccuracyの算出方法による違いはありますか?
私は現在マルチラベルの画像分類をkerasのCNNを用いて行っています。
また、kerasのaccuracyだけでなくscikit-learnの様々な評価方法(Recall, Precision, F1 scoreそしてAccuracy)を用いて精度の再確認を行いました。
結果としてkerasで算出したAccuracyは約90%を示すのに、scikit-learnはどれも60%前後しか示しません。
...
0
票
0
回答
304
閲覧数
dlibをインストールしようとするとcv2が見つからないというエラーが出てしまう
https://www.kkaneko.jp/dblab/dlib/trydlib.html
上のサイトを参考にしてdlibのインストールを進めていたのですが
py -m pip install --upgrade pip
py -m pip install -U numpy scikit-image scikit-learn
...
0
票
2
回答
168
閲覧数
特徴量どうしに関連がある場合の機械学習
機械学習に関する質問です。
特徴量が何層かの構造を持っているとき、
Pythonのscikit-learn等で機械学習をする場合、
どのようなデータとして扱えばよいか、またどのようなモデルが適切か教えてください。
簡単な例を挙げます。(良い例ではないかもしれませんが……)
物質Aと物質Bを色々な割合で混ぜ合わせた水溶液の物性データをもとに
...
1
票
1
回答
199
閲覧数
機械学習を用いた各パラメータの重要度評価について
フリーソフト「Orange」を用いて機械学習を行っている大学生です.
現在,3つの入力値に対して6つの出力値が得られる問題について扱っています.
どのパラメータがそれぞれの出力値に対してどの程度寄与するのかを数値として知りたい(*)のですが,どの評価を用いてどのように考察していけばよいのか全く分かりません.
まず,(i)各特徴量の重要度(寄与率?)...
0
票
1
回答
422
閲覧数
Teachable Machineでローカルファイルを読み込む方法について
Teachable MachineのAudio Projectで、学習データとしてローカルファイルを使いたいのですが、
You can only upload zip files with audio data previously created/downloaded with Teachable Machine.
と出てしまいます。
実際にTeachable Machineで録音し、...
3
票
2
回答
150
閲覧数
分類問題における評価方法について
機械学習を研究で初めてまだ初心者です。研究で4クラス分類の問題を扱っててaccuracyやprecisionやrecallを算出したいです。
データ数が少ない(30件ほど)で分割のされ方によってスコアにかなり影響を受けてしまいます。交差検証したときのばらつきが大きくて(例えばaccuracyが[0.83333333 0.72727273 0.44444444]など)評価方法に困っています。...
1
票
1
回答
452
閲覧数
画像判別AIモデルのloss率とacc率を良くしたい
うさぎとカメの判別AIの開発をしています。
しかし、なぜか学習がうまくいかず、lossやacc(判別成功率)の値が良くなりません。
通常、lossとaccは反比例で片方の数値が増加すればもう片方が減少するはずなのに、lossが膨大に増加してaccは0.5あたりで変化しません。
これはニューラルネットワークの設計がいけないのでしょうか??
以下に、スペックとソースコードと結果画面を載せます。
...
0
票
0
回答
67
閲覧数
pythonプログラム実行時にエラーも出さずにログインパネルに移動してしまう。
理系大学院生からの質問です。
プログラミングに慣れ親しんでいる同期や先輩に質問してもみんな答えられないので、詳しい方がいたら教えて頂きたいです。
・anaconda3で仮想環境を作り、pycharmを使ってpythonのプログラミングを行っています。(mac)
・先輩の書いたプログラムをpycharmで実行しようとすると、実行した途端何故かmacのログインパネル(...
1
票
1
回答
87
閲覧数
Dockerを使った機械学習のトレーニング精度を良くしたい
Dockerを使って3種類の花の判別プログラム(.py)を作成しています。
プログラムを実行して8回のトレーニングを行いましたが、なぜかトレーニングうまくできませんでした。
これが学習の結果です。
lossもaccも一定の数値のままででした。
試しに、Dockerを使わずにそのままPythonプログラムを実行してみました。
トレーニングがうまく機能しました。
つまり、...
0
票
1
回答
287
閲覧数
Pythonのモジュールを用いた特徴量抽出のためのプログラムでエラーが出る問題について
前提・実現したいこと
言語処理100本ノックの「6章機械学習 51. 特徴量抽出」の問題について、回答でどの部分を修正したらいいかわからないです。
Qiita記事「言語処理100本ノック 2020 第6章: 機械学習の51」に掲載されていた回答のまま、jupyter notebookでプログラムを実行しています。
エラーメッセージ
モジュールspacyはインストールしましたが、
Can'...
0
票
1
回答
586
閲覧数
pythonのhmmlearnについて
http://keik-117.hatenablog.com/entry/2016/07/05/213903
こちらのサイトのコードを上から入力していき、
X, Z = model.sample(10)
を実行したのですが、
>>> X
array([[ 0.75706838, -0.1280334 ],
[ 10.3137587 , 10....
0
票
1
回答
457
閲覧数
Trainable Parameterとはなんですか?
機械学習初心者です。
よろしくお願いします。
高負荷がかかる機械学習などでもGoogle ColaboratoryのGPU環境を使うことで、手軽に機械学習の勉強ができると聞いてGoogle Colaboを試してみています。
とりあえずテストでGoogle ColabでGPUをオンにして簡単なGRUでの予測計算を実行しているのですが、なぜかローカルPCよりも計算に ...
1
票
0
回答
41
閲覧数
Apache SparkのMLlibによる機械学習の分散の処理イメージがわきません。具体的な処理を教えてください。
Apache SparkのMLlibを使用し機械学習の実装ができることを知りました。
その中で、モデルの学習を分散の仕組みがイメージできませんので、教えていただきたいです。
私の認識は以下の通りです。
文字列の整形や文字列のベクトルへの変換などはそれぞれのノードで可能。
モデルの学習は「重み」が存在しており、モデルの学習とは「重み」を更新していくもの。
...
0
票
1
回答
509
閲覧数
ニューラルネットワークの重み更新
ニューラルネットワークに関する質問です。
ニューラルネットワークでロジスティック回帰を実施するときは学習率や更新回数などを指定しますよね?一方、一般化線形モデルにおけるロジスティック回帰を実施するときにそのようなものを指定した覚えがありません。(Rで言うと glm())
一般化線形モデルでは学習率などを設定していないんですか? それとも、内部的に何らかの処理がされているのですか?
...
0
票
1
回答
398
閲覧数
要素がlist型であるpandasのdataframeをndarrayの2次元配列にしたい
dataframe e.g)
date vec
2019-01-04 [-0.08072768, -0.061041858, 0.09872102]
2019-01-04 [-0.07853928, -0.058681224, 0.10971683]
こういったdataframeがあった場合に、...
0
票
1
回答
231
閲覧数
バギングしたランダムフォレストの決定木を表示したい
バギングしたランダムフォレストの決定木の中からテストスコアが一番良いものを表示したいです。
以下のようなコードを書きました。
clf=BaggingClassifier(RandomForestClassifier(max_depth=depth, random_state=0), n_estimators=100, random_state=0)
#モデルを構築
clf = clf....
0
票
0
回答
533
閲覧数
バギングした決定木を可視化したいのにエラーが出る
バギングした決定木を可視化したいです。
以下のようなコードを書きましたが
#決定木モデルとバギングの設定
model=BaggingClassifier(tree.DecisionTreeClassifier(random_state=0), n_estimators=100, random_state=0)
#モデルの構築
scores = {}
model.fit(X_train, ...
1
票
0
回答
190
閲覧数
学習曲線から見る過学習もしくは学習不足の判断について
表題の件ですが、現在隠れマルコフモデル(HMM)で時系列データの自動判別を試みていますが、過学習の疑いがあるため質問しました。
サンプル数は60でtrue/falseの2値分類の学習なのですが、サンプル数別の検証結果とテスト結果によるaccuracyの曲線が以下のようにプロットされました。
お聞きしたい事としては、青線が検証データ・緑線がテストデータでのスコアなのですが、...
1
票
0
回答
316
閲覧数
RNNの誤差逆伝播法における勾配の足し合わせ処理について
現在、書籍「ゼロから作るDeepLearning2」でRNNの誤差逆伝播法を学習しており、
そのアルゴリズムについて不明な点があったため、ご教示いただきたいです。
該当するソースコードと不明点を下記に、記載させていただきます。
質問①: 誤差逆伝播を行う関数への引数が、「時刻tにおける出力の勾配(dhs)と、時刻t+1の勾配(dh)を足し合わせた値」を渡している理由がわからない。
...
0
票
0
回答
162
閲覧数
pythonライブラリhmmlearnのAttributeError
実行したコード
from hmmlearn import hmm
model = hmm.GaussianHMM(n_components=5, n_iter=100)
model.covars_
吐き出されたエラー文
---------------------------------------------------------------------------
...
0
票
1
回答
787
閲覧数
KerasでVGG16の転移学習をするときにValueErrorが発生する
質問
Kerasに実装されているVGG16を転移学習して画像の2クラス分類をしようと考えております。
参考サイトのコードを一部修正して実行すると、下記エラーが発生して学習できません。
ValueError: Error when checking target: expected sequential_1 to have shape (2,) but got array with shape (...
0
票
1
回答
101
閲覧数
ラベルなしのセンサデータを使って、分類を行いたい
ある論文のコピープロジェクトで、耳の中にセンサーを組み込み、表情認識を行う(何もしていない時の出力は0、大きく口を開けた時は1)ということを実装しようとしています。
chainerでニューラルネットワーク簡単実装(初心者向け)
上記のサイトを参考にして、ラベル付けされたセンサデータ(フォトリフレクタ、0.1s*20=2s)をまとめたcsvファイルで学習を行いました。
今、...
0
票
1
回答
156
閲覧数
tensorflowのsparse_placeholderのAttributeError
tensorflowでスパーステンソルのプレースホルダーに関して以下のように定義しました
ph = {
'adj_norm': tf.sparse_placeholder(tf.float32, name="adj_mat"),
'x': tf.sparse_placeholder(tf.float32, name="x")}
しかし,以下のようなエラーが出ます.
'...