[機械学習] タグが付いた質問
193
質問
7
票
1
回答
1万
閲覧数
教師あり学習と教師なし学習の違いは何ですか?
何冊か本を読んだのですが、抽象的ではっきりした理解を得ることができませんでした。
具体的な例を教えていだだけますか
7
票
2
回答
800
閲覧数
人工知能で学習していない人の顔だという事を判断することは可能でしょうか
ちょっと気になったので教えて下さい。
人工知能に人の顔(写真)を学習させると、別の写真であっても人物をある程度特定できるようになるというのはイメージできますが、
逆に「この人は今まで学習していない人である」ということも判断させることは可能なのでしょうか。
5
票
1
回答
1,111
閲覧数
CNNにおいて奇数サイズのカーネルが推奨されるのはなぜですか
なぜCNNにおいて奇数サイズのカーネルが推奨されているかわかりません。
CNNにおいて、多くのページに「畳み込みのカーネルは3×3や7×7のような奇数サイズが好ましい」と書かれており、理由について「中心に画素が存在するため」などと書かれていますが、それ以上の説明がなく、納得できないままでいます。 入力画像サイズが(2n, 2n)の場合、奇数サイズのカーネルでストライドを2にして(n, n)...
5
票
1
回答
525
閲覧数
LSTMをPythonで
最近、RNNについて勉強しています。今ちょうど、LSTMについて勉強しているところなのですが、tensorflowやkerasの使い方はなんとなく分かるけれど応用できるほどの技量はないので、イメージを膨らますためにもとりあえずPythonのnumpyのみでコードを書いてみようと思いました。一応、入出力ゲート、忘却ゲート、CEC、覗き穴結合などを搭載した自作LSTMを作ってみたのですが、...
5
票
1
回答
2万
閲覧数
nvidia GPUのメモリを再起動せずに解放する方法が知りたい
PCを再起動させずにメモリを解放する方法が知りたいです。
コマンド等でメモリ解放できないでしょうか?
2つのGPUを使用しており、片方は動作中のままにしたいので、
再起動や、全てのプロセスを停止させたりはしたくないです。
以下は nvidia-smi コマンドを実行した画面です。
●環境
OS:ubuntu14.04
GPU:GeForce GTX 1080
※python(chainer)...
4
票
1
回答
1,193
閲覧数
TensorFlowでDQN なぜかQ最大値が小さい
お世話になっております。
下記の記事を書いている者です。
機械学習の理論を理解せずに tensorflow で オセロ AI を作ってみた
今回お聞きしたいのは、
上記の オセロ AI の訓練時に Q_max が小さいまま 訓練されない
ソースは上記URLにリンクがあります。(ttps://github.com/sasaco/tf-dqn-reversi.git)
train.py ---...
4
票
1
回答
1,293
閲覧数
Rのmvtnormパッケージの関数 pmvnorm() の引数 lower,upper の意味について
*R言語のmvtnormパッケージの多変数累積密度関数pmvnorm()を使用して、2次元の正規分布関数の任意の範囲の累積確率密度(確率)を取得したいのですが、この関数の引数lower,upper(ベクトルで指定)が何を意味しているのか分かりません。この引数の意味を教えて頂きたいですm(__)m
関数pmvnorm()のヘルプ
http://math.furman.edu/~dcs/...
4
票
2
回答
1,349
閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
4
票
0
回答
154
閲覧数
Xgboostの数学的背景について質問
XGboostの数学的背景について質問です。
Xgboostではロス関数の最小化の際に、
同関数をテイラー展開してから最適解を解くかと思います(Newton法)。
しかし、Newton法は、そもそも対象となる関数が2階微分できないと使用できない、
ヘッセ行列の正定値性が確保されないと使えないなどの欠点があったかと思います。
これについて同メソッドではどのようにクリアしているのでしょうか?
...
4
票
1
回答
175
閲覧数
複数日本語文章の分類の簡単な実装方法について
文章の分類方法のメリットデメリットを教えてください。
■インプット
・200文字程度の複数の日本語文章
・分類先(恋愛、ホラー、サスペンスなど、予め10個程度定義)
■アウトプット
文章A -> 恋愛
文章B -> サスペンス
文章C -> ホラー
、、、
■分類方法
ちょっと調べたところ下のような方法が、
機械学習周りが素人の自分(ただのRailsエンジニア)...
3
票
2
回答
5,934
閲覧数
ベイズ最適化と遺伝的アルゴリズムと強化学習の違い
これらの最適化にかかる時間, 最適化の拡張性の違いはなんですか?
またそれぞれの強みはなんですか?
※拡張性は例えば値のみしか最適化できないなど
3
票
1
回答
2,753
閲覧数
Pythonを使ってロジスティック回帰したときのP値
Python、機械学習についてここ1週間くらいでやりはじめた初心者です。
とても初歩的な質問で申し訳ありませんが、何卒お願いします。
Pythonを使ってロジスティック回帰分析をしようと思っています。
以下のようなユーザーデータを持っています。
年齢・性別・年収と、購入したかどうかの0or1のフラグです。
ユーザid, 年齢, 性別, 年収, 購入フラグ
1 , 30, ...
3
票
1
回答
2万
閲覧数
chainerのsoftmax_cross_entropy()について
pythonとも機械学習とも勉強不足でわからない点があったため、chainerの交差エントロピー誤差を計算するsoftmax_cross_entropy() について質問させてください。
MNISTを識別するサンプルコード
https://github.com/pfnet/chainer/blob/master/examples/mnist/train_mnist.py
を動かしてみました。
...
3
票
1
回答
602
閲覧数
Theanoのarangeについて
Deep Learning Tutorialsのロジスティック回帰を読んでいます。
http://deeplearning.net/tutorial/logreg.html
ロジスティック回帰での尤度関数を計算する部分。
-T.mean(T.log(self.p_y_given_x)[T.arange(y.shape[0]), y])
ここの T.arange についてなのですが
...
2
票
3
回答
133
閲覧数
AzureのMachine Learningの学習モジュールの使い分けについて
先週から機械学習を勉強し始めた、テクノロジーにかなり疎いOLです
基本的な質問ですみません
AzureのMachine Learningで来客数予測をするべく勉強を始めたのですが、
学習モジュールの使い分け方法がわからなくて行き詰まっております
同じ線形回帰であっても
Liner RegressionとBayesian Liner Regressionはどう使いわけするのか
(...
2
票
1
回答
3,608
閲覧数
協調フィルタリングにおける、アイテムベースとユーザーベースの区別方法
レコメンドシステムの協調フィルタリングでアイテムベースとユーザーベースの違いがわからないので質問します。
ぐぐってみると、あるページではアイテムベースと紹介されてるような内容が、他のページではユーザーベースだったり、その逆だったりがあります。
この2つを区別する要素を教えていただきたいのと、できれば下記の例で説明していただきたいです。
下記の例でアイテムベースが、...
2
票
1
回答
5,769
閲覧数
pythonでscikit-learnを用いたらImportErrorが起きてしまいます
技術評論社のデータサイエンティスト養成読本 機械学習入門編を読んでいます
128ページからscikit-learn入門のページが始まるのですが
そちらにあるコードを試したところ、scikit-learnのImportErrorが起きてしまいます
何が悪いのかわかりませんが・・・どなたかご存知の方はいらっしゃらないでしょうか?
Mac OSX 10.9
python 3.4.3
...
2
票
1
回答
689
閲覧数
Jupyter NotebookでWord Cloudを作成したいのですが、画質が粗いです。
Jupyter NotebookでWord Cloudを作成したいのですが、添付画像のように画質が粗いです。
画質をよくする方法を教えて下さい。コードはPythonで書いています。
コードは以下です。
import pandas as pd
from janome.tokenizer import Tokenizer
import matplotlib.pyplot as plt
from ...
2
票
1
回答
484
閲覧数
CNNによる画像分類における、学習とは?
私はpython言語で書かれたkerasを用いて、画像分類を行っていますが、学習と判別がどのように行われているのか、仕組みが分かりません。
例えば、MNISTのデータセットをDLし、モデルを構築後、下記のコードを入力したとします。訓練データが54000枚、validation splitの値を0.1に設定しバリデーションデータが6000枚あります。
model.compile(
loss='...
2
票
1
回答
1,038
閲覧数
畳み込みニューラルネットワークの入力画像の解像度について
畳み込みニューラルネットワーク(CNN)の入力画像について質問です。既存のモデルを使う場合入力画像のサイズが決まっていますが、ほとんどの画像の場合、サイズはバラバラだと思います。
そこで質問なのですが、CNNの入力用に大きな画像の解像度を落として小さな画像を生成するとCNNの精度はどのように変わるのでしょうか。
例えば、...
2
票
0
回答
57
閲覧数
ロジスティック回帰分析の考え方について
ロジスティック回帰分析の勉強をしているのですが、下記についてアドバイスいただけることがありましたらお願いできますと幸いです。
↓ ↓
ロジスティック回帰分析の説明変数で、一般的に、発生(1)・非発生(0) に対して説明変数が線形的に変化する(例えば煙草をたくさん喫うほど肺がんが発生しやすい等)と思いますが、説明変数が発生(1)に対して非線形に変化する場合(例えば、年収と軽自動車購入・非購入など、...
2
票
0
回答
90
閲覧数
初期条件を入力したときに値ではなく可視化された図を出力するモデルを作りたい
プログラミング初心者で使用言語はPythonです。
やりたいことは以下の通りです。
ランダムに障害物が配置されてる仮想水路を設定
色んな流量を流して平面2次元の計算をさせて流速ベクトルを可視化する(カルマン渦とかをみたい)
結果を畳み込みニューラルネットワークで学習
学習結果から次のようなことをしたい
任意の場所に障害物を配置し、...
2
票
0
回答
133
閲覧数
入れ子の交差検証をホールドアウト検証形式で書いてみたけど、出力結果が合わない
入れ子の交差検証(性能評価用の外側ループ、チューニング用の内側ループともに5分割)を、ホールドアウト形式で書いてみたんですが、出力結果が合いません。
読み込んでいるcsvの内容は、3列目がラベル情報で、上から5個ずつ1と0が交互に50行分格納されています。特徴量は4~17列に格納されています。
入れ子構造の交差検証のコードが間違っているのでしょうか?
それとも、...
2
票
0
回答
194
閲覧数
行列を数学的な関数と見做した時の行列積計算に相当する関数に一般的な呼称はありますか?
個人的な興味から、機械学習における基本的な多層パーセプトロンについて、入力や重み行列を行列データでなく(数学的な意味での)関数として表した表現を考えています。
入力をバッチ次元xデータ次元yなf(x,y)
重みをデータ次元yニューロン次元zなg(y,z)
としたとき、行列積に相当する計算は、おそらく
∫f(x,y)*g(y,z)dy (でy=0〜nの定積分)
...
2
票
2
回答
146
閲覧数
分類問題における評価方法について
機械学習を研究で初めてまだ初心者です。研究で4クラス分類の問題を扱っててaccuracyやprecisionやrecallを算出したいです。
データ数が少ない(30件ほど)で分割のされ方によってスコアにかなり影響を受けてしまいます。交差検証したときのばらつきが大きくて(例えばaccuracyが[0.83333333 0.72727273 0.44444444]など)評価方法に困っています。...
2
票
0
回答
45
閲覧数
『トピックモデルによる統計的潜在意味解析』の2.2節のp(x_i | π)=Multi(x_i | π)の成立理由
とてもピンポイントな質問で申し訳ありませんが、
『トピックモデルによる統計的潜在意味解析』(奥村学 監修、佐藤一誠 著)の
2.2節の式(2.3)の前の文章に以下が書かれており、私には飛躍的で理解できません。
p(x_i=k | π)=Multi(n_k=1 | π, 1)と考えられるため、
これをp(x_i | π)=Multi(x_i | π)と表記する。
ここで、...
2
票
0
回答
311
閲覧数
deep-learning-modelsの画像認識時間
下記のサイトを見ながら画像認識を試しています。
Raspberry Pi 深層学習ライブラリで物体認識 (Keras with TensorFlow・Open CV)
学習済みモデルh5とjsonをダウンロードして同じ階層に置き、inception_v3のh5のリンク先をローカルに書き換えました。
WEIGHTS_PATH = '...
1
票
3
回答
2万
閲覧数
機械学習によく出てくるbatch_sizeとはバッチとはなんですか?
機械学習によく出てくるbatch_sizeとはバッチとはなんですか?
y_vals = np.transpose([np.array([y[13] for y in housing_data])])
x_vals = np.array([[x for i,x in enumerate(y)
if housing_header[i] in cols_used] ...
1
票
1
回答
2,317
閲覧数
ディープラーニングの解析結果が常に同じ値になります
売上個数予想のプログラムを作っていますが、
学習させた後MultiLayerNetwork.output(xxx)させた結果が常に同じ値になり困っています。
事前に学習データをAI.MaxInputStringLength(20)のパラメータに変換済みでそのサンプルが数万個あります。
つまり、入力は20のパラメータがあります。
今回は売上個数の予想なので出力は1つです。
(...
1
票
1
回答
201
閲覧数
random値の違い
いくつかのプログラミング勉強サイトで似たような問題があったので一つ例にあげて質問させていただきます。Pythonで機械学習の本(python 機械学習プログラミング)で勉強するなかで以下のサンプルコードをコピペして実行したのですが出力が異なりMisclassified samplesの数が模範解答では4になっているのに対し私は9と出力されました。...
1
票
1
回答
2万
閲覧数
『Pythonではじめる機械学習』の mglearn を使いたいが、not defined となる
今オライリー・ジャパンの「Pythonではじめる機械学習」という本で機械学習の勉強を始めています。そこで、GitHubにあるmglearnというライブラリを入手したいのですが、やり方が分からず困っています。Download ZIPというボタンを押して保存したりしているのですが、うまくいきません。できるだけ詳しく教えていただけると助かります。mglearnのリンク先は下です。
https://...
1
票
2
回答
486
閲覧数
ニューラルネットワークは分類問題以外にも適用可能なのでしょうか?
ニューラルネットワークがある入力から出力を計算し、その出力から入力がどのカテゴリに分類されるかという問題に適用できるのは理解したのですが、入力を画像とし、出力もまた画像とするなど、入力と出力が同じ形式になるような問題にも適用できるのでしょうか?
1
票
2
回答
495
閲覧数
なぜ重みの初期値にnp.random.randnを用いるのか?
質問1
「ゼロから作るディープラーニング」を勉強していて、182pのところを読んでいたら、そもそもなんで、重みWの初期値を今までnp.random.randnというものにしていたのかがわからなくなりました。なのでなぜnp.random.randnを重みの初期値にするのかを教えていただきたいです。
質問2
np.random.randnは「平均0、分散1(標準偏差1)の正規分布(標準正規分布)...
1
票
1
回答
543
閲覧数
KeyError: 'PClass'の対処法
先ほど質問させて頂いた者です。回答者様のアドバイスを受けて修正したところ、一部ですがこのようなエラーが出ました。これはどういったエラーなのでしょうか?対処法を教えて頂きたいです。
from google.colab import files
upload = files.upload()
from google.colab import files
upload = files.upload()...
1
票
1
回答
84
閲覧数
手書き数字のMNISTデータから1と2のデータだけを学習させたい。
手書き数字の画像データセットはデフォルトでは1から10まであります。
その中から1と2だけを取り出し、1と2の分類だけを行えるようにしたいです。
次のような手順で進めました。
・1と2の画像データ、画像ラベルを取り出す
・取り出した画像データをリストに置き換え、画像データと画像ラベルをそれぞれ一つにまとめてからnumpy配列に戻す
・適当な学習モデルを作り、出力を(2)にして学習を実行する
...
1
票
2
回答
557
閲覧数
二値分類問題をディープラーニングで解く際にうまく学習されない
入力されたxとyの値から0か1かを分類できるようにニューラルネットワークを学習させようとしているのですが、何度回してもうまく学習できません。
どうすればよいのか教えていただけると幸いです。
import numpy as np
def sigmoid(x):
return 1 / (1 + np.exp(-x))
def sigmoid_grad(x):
return (1....
1
票
1
回答
333
閲覧数
AIを使用すれば「部品の分類」を実現できるかどうか
AIについて分かっておらず、以下のようなことを、AIを使用すれば実現できるかお聞きしたいです。
行いたいこと
様々な部品に対して、キーワードを登録しており、一定数のサンプルデータ(教師データ?)から新しい部品に対するキーワードを自動作成する。
例えば、Webサイトで、様々な部品(部品名や型式やメーカ名も含む)を登録します。また、それらのデータをDBに蓄積させます。
その後、...
1
票
1
回答
476
閲覧数
時系列データのパターンマッチングについて
時系列データのパターンマッチングについて
ある時系列データ(a)に、あらかじめ指定したパターンデータ(b)と似た形が、
どの時期にどの程度含まれているか、相関関係を求めたいのですが、
どのようなアプローチがよいでしょうか?(以下の方法は適切でしょうか?)
◇想定しているデータ
(a)時系列データ
時系列データは、音声データ、株価データなどを想定しています。
インデックスはpd....
1
票
1
回答
2万
閲覧数
'numpy.ndarray' object has no attribute 'append'のエラーについて
現在、Python機械学習プログラミング 達人データサイエンティストによる理論と実装の本で勉強してまして、
コードを実装すると、下記のエラーが発生してしまいます。ネットで調べたところ、numpyでarrayを追加することで解決とのことですが、どのようなコードを追加すればよいのか分かりません。
コードの追加及び他の方法で解決することについて、ご教示よろしくお願いいたします。
weights, ...
1
票
1
回答
692
閲覧数
Chainerでオートエンコーダーを作る際にTypeError: Unsupported type <class 'NoneType'>というエラー
Chainerをつかって、pythonで自己符号器をつくろうとしています。次のようなコードを書いて実行しました。
class Autoencoder(Chain):
def __init__(self):
super().__init__()
with self.init_scope():
self.l1 = L.Linear(3,2)
...
1
票
2
回答
1,065
閲覧数
画像データが格納されたテンソルの扱い方
TensorFlowで画像処理を行いたい初心者です。
機械学習ネットワークから出力される、64×64の画像20枚分のテンソル[20,64,64,3]に対してある処理を行い、新たなテンソル[20,64,64,1]を求めたいのですが、適切な操作がわからず困っております。
やりたい処理としては、画像一枚の4×4のパッチ領域でRGBチャネル内の一番小さい値を見つけ出し、...
1
票
1
回答
954
閲覧数
分類確率とデータの出力方法
機械学習を勉強している大学生です。
python,tensorflow,kerasを用いて2クラス分類を行うプログラムを書いています。
分類確率をmodel.predictで出すことはできるのですが、
その確率値がどのデータに対するものなのかを出力する方法がわかりません。
以下は確率値を出すための部分的なプログラムです。
result = model.predict(X_test)
...
1
票
1
回答
396
閲覧数
特徴量として使えるデータを平均の差から見つけ出す方法
クラスタリングを行う上で、特徴量を選択する際に「平均の差」を使おうと考えています。
複数ある属性のうち、平均差が大きいものを特徴量として選択すれば、より適切に集団を分割できるのではないかと考えています。
その際の「平均の差を比較する」方法がわかりません。
例えば、高校のクラスが2つ(A組、B組)あったとし、
それぞれ身長の平均(cm)、体重の平均(kg)、アルバイト収入の平均(円)...
1
票
2
回答
1,041
閲覧数
時系列の特徴量の作成の仕方
機械学習における、時系列の特徴量作成に関して質問です。
以下の添付した画像から、例えば
・Morning直後はある値が増加傾向にある。
・NoonもMorningと比べて大きな変化量はないが、増加傾向にある。
・Eveningも大きな変化量はないが、増加傾向にある。
こういった事実現象を時系列の特徴量として、表現するにはどういった方法がありますでしょうか
機械学習に精通している皆様方、...
1
票
2
回答
2,116
閲覧数
ディープラーニングにおいて、データ数が少ない場合の過学習が起きているかどうかの判断
CNNとRNNを組み合わせたモデルで動画分類を行っているのですが、訓練データがほぼ100%の正解率が出るのに対して、テストデータでは正解率が低いです。
ただ、過学習している時の典型的なグラフのようにテストデータの正解率が途中からどんどん下がるようなことは見られませんでした。
現在手元にあるデータ数は50程度で、かなり少なく、データ間の分散が比較的大きいです。
...
1
票
1
回答
587
閲覧数
DeepLearningの学習データ(jpeg、raw)と組み込みシステムについて
私は画像を使ったディープラーニングについて勉強しています。
今回疑問があり皆様の意見を聞きたく投稿しました。
一般的にWebの画像認識に使用する学習データは容量を少なくする為、jpeg画像が多いと思います。
しかし、組み込みシステムで使用するカメラ画像は圧縮せずにraw形式の画像をメモリに保存し認識処理すると思います。
ここで、Web上の学習モデル(jpeg)を使用した場合、...
1
票
1
回答
945
閲覧数
Word2Vecにおけるマイナスの概念について
Word2Vecでsimilarityの値がマイナスになるのはどうしてなのでしょうか?
たとえば、次のコードを実行した時に、meowが-0.018となり、マイナスになっています。
この場合100次元空間のベクトルの内積ですから、マイナスではなくてプラスになると思っています。
今回はmeowだけでしたが、sizeのパラメーターを変更すると他のものもマイナスになったりします。
ソースコード
# ...
1
票
1
回答
1,862
閲覧数
pythonでTFlearnがインポートできないです。
Mac book で『初めてのTensorFlow』と言う本にしたがってTFlearnをインストールしたのですがいざpythonでインポートしようとすると下のような表示が出てしまいます。
解決方法をぜひ教えていただきたいです。
よろしくお願いします。
Shiraishi-Sadaaki-no-Macbook-ea:~ shiraishisadaaki$ python
Python 3.5.0 (...
1
票
1
回答
599
閲覧数
手の姿勢推定における学習データのラベル付け
現在単視点RGB画像から手の姿勢推定を行いたくて、機械学習でやろうと思っています。
関節の位置をラベルとしてつけるイメージです。
このラベルなのですが、配列は学習データとして取り入れられるのでしょうか?
出力は推定される関節の位置で、これを手モデルに合成できればいいかなと思います。
機械学習の経験が浅く、どう学習データを作るのかがわかりません。ご教授頂けると幸いです。
追記 (具体的な方法): ...
1
票
1
回答
1,077
閲覧数
R言語で、判別分析(LDA)を用いた画像データの2値化法を実行する際の MASS パッケージの関数 lda() の使用法について
R言語にて、判別分析(LDA)を用いてグレースケールの画像データを2値化画像するコードを検討中です。
これを実現するにあたり、MASSパッケージのlda()関数を使用しようと考えてるのですが、lda()関数使用時エラーが発生し、その原因が分かりません。このエラーの意味と対策を教えて頂きたいですm(__)m
lda()関数のヘルプファイル:
https://stat.ethz.ch/R-...