[scikit-learn] タグが付いた質問
scikit-learnはPython向けの機械学習ライブラリで、データ解析やデータマイニング用にシンプルで効率的なツールを提供します。誰でも利用しやすく、様々な状況で再利用できます。NumPy, SciPy, matplotlibを用いて構築されています。このプロジェクトはオープンソースで、商用利用が可能です。(BSDライセンス)
29
質問
0
票
0回答
31 件の閲覧数
pythonで具体的な画像の組からフィルタを予測する方法について
元画像と,それに何かしらのフィルタ処理が施されてブラーがかかったような観測画像が与えられています.pythonを使って,この2つの画像からどんなフィルタなのかを予測する方法はありませんか?
フィルタは,ガウシアンフィルタのような,中心画素から離れるに従って重みが小さくなっていくようなフィルタを想定しています.
方法としては,例えば重回帰分析があります.ある画素を目的変数,...
1
票
2回答
2,786 件の閲覧数
sklearnのn_jobsについて
sklearnのランダムフォレストのグリッドサーチをしようと思い,以下のようにグリッドサーチのコードを使おうとしました.n_jobsを-1にすると最適なコア数で並列計算されるとのことだったのでそのようにしたのですが,一日置いてもまったく計算が終わる気配がなく,n_jobs=1とすると数秒で終わるという状態になっています.メモリやCPUの使用率は100%に近くなっており動いてはいるのですが,...
0
票
1回答
118 件の閲覧数
Kerasを使った学習済みモデルで実際にテスト用データを用いてクラスタリングをしたい
学習済みCNNの評価に使用したテストデータを用いて実際にクラスタリングした結果を取得したいです。
Kerasを使ってクラスタリングを行うネットワークの構築を行っています。
学習および評価に使用する画像を次のように取得しました
target_dir = "TargetDir"
data_df = pd.read_csv(target_dir+'data_sheet.csv')
file_list ...
0
票
0回答
83 件の閲覧数
説明変数が被説明変数より多い場合のinverse_transformの仕方について
下記の様に、複数のデータを正規化し、機械学習をしたものの、
正解ラベルは1つしかない場合の予測結果を正規化前の状態にる場合、
どのようにするのがスマートでしょうか。
(復元用のデータフレームも次元を合わせてAAA,BBBを空にして作る必要あり??)
from sklearn.preprocessing import MinMaxScaler
msst = MinMaxScaler()
...
0
票
1回答
158 件の閲覧数
sklearnでのモデル再学習について
現在Pythonのsklearnを用いて、機械学習を行っています。
モデルを作成し、そのモデルから予測をすることはできています。
そこで質問なのですが、このモデルを再度学習したい場合そのモデルを用いて
追加学習をすることはできるのでしょうか。
もしくは、以前学習に使用したデータを用いなければならないのでしょうか。
基本的な質問かもしれませんがよろしくお願いいたします。
3
票
1回答
2,751 件の閲覧数
scikit-learn/k-meansを使った画像のクラスタリングでのエラー
ディレクトリ内のjpg画像ファイルをSURFを用いて、特徴量を抽出し、すべてのSURFをk-means法でグループ化して基本特徴量(visual word)を求め、これを使って画像の局所特徴量リストをbag-of-wordsリストにするプログラムがあります。
試しに、90枚ほどの画像でやるとうまくグループわけができましたが、いざ1900枚ほどの画像でやってみると、...
1
票
1回答
641 件の閲覧数
時系列の特徴量の作成の仕方
機械学習における、時系列の特徴量作成に関して質問です。
画像を添付させていただきます。
以下の画像から、例えば、
・Morning直後はある値が増加傾向にある。
・NoonもMorningと比べて大きな変化量はないが、増加傾向にある。
・Eveningも大きな変化量はないが、増加傾向にある。
たとえばこういった事実現象を時系列の特徴量として、
表現するにはどういった方法がありますでしょうか
...
1
票
0回答
65 件の閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
2
票
2回答
118 件の閲覧数
分類問題における評価方法について
機械学習を研究で初めてまだ初心者です。研究で4クラス分類の問題を扱っててaccuracyやprecisionやrecallを算出したいです。
データ数が少ない(30件ほど)で分割のされ方によってスコアにかなり影響を受けてしまいます。交差検証したときのばらつきが大きくて(例えばaccuracyが[0.83333333 0.72727273 0.44444444]など)評価方法に困っています。...
0
票
0回答
58 件の閲覧数
scikit-learnの2クラス分類におけるしきい値について
scikit-learnを利用して2クラス分類をしています。
pred_proba(X)を利用すると、
クラスの所属確率がわかるかと思います。
ここで、ROC曲線などから今回のタスクにおける最適なしきい値が0.3と判明したとします。
その時にあるサンプルXをpred_proba(X)にかけると、
[0.2, 0.8]が出力された際には、しきい値0.3を超えてるので1が正解になると思います。
...
0
票
0回答
129 件の閲覧数
機械学習で作成したモデルに、実際のデータを当てはめて判定を行う方法
pythonとscikit-learnを用いてrandom forestを用いた機械学習モデルを作成しました。
2値分類のモデルですが、出来たモデルに、新規のデータを当てはめ、その判別(2値分類)を行いたいと考えております。
調べてみたところ、ML flowを用いれば、出来そうということが分かりましたが、例えばコードを少々追加して、新規データを当てはめて判別する方法というのはございますでしょうか。
...
0
票
0回答
289 件の閲覧数
決定境界を引きたい matplotlib python scikit-learn kmeans plotされない
プログラミング(特にpython)初心者です。
センサからデータを取得し、scikit-learnとk-meansを用いてクラスタ分析しています.
matplotlibを使用し可視化しています
今回、この結果に決定境界(svm)を引きたいと思っています。
取得データとの組み合わせがわからぬままサイトを参考にしてプログラムしてみたのですが
コンパイルは通り実行できたものの、...
0
票
1回答
88 件の閲覧数
scikit-learn matplotlib軸を定義したい クラスタ分析
湿度センサと心拍センサを用いて感情別にクラスタ分析をしようと思っています。
各センサから取得したデータをcsvファイルに保存し、read_csvで読み込みmatplotlib で可視化させているのですが、図のようになってしまいます。
縦軸を心拍数、横軸を湿度として値を表示させるにはどのようにすればいいのでしょうか?
手動で範囲を決める、set_ylim([min,max])を用いるべきなのか
...
0
票
1回答
93 件の閲覧数
k-means法sickit-learn クラスタリング エラー解決方法
心拍センサで取得したデータをcsvファイルへ保存しread_csvを行いk-means法を用いて2種類(感情別(画像参照;1、落ち着いている 2、イライラしている))にクラスタリングしたいのですが、
ValueError; Found array with 0 feature(s) (shape=(30,0)) while a minimum of 1 is required.
...
0
票
1回答
190 件の閲覧数
ランダムフォレスト 、一つ抜き交差検証におけるfeature importanceの出力
ランダムフォレスト、一つ抜き交差検証を用いて、予測モデルの作成を行っています。
ランダムフォレストでは、feature importanceを出力できますが、一つ抜き交差検証を用いた時の、平均のfeature importanceを出力することは可能なのでしょうか?
可能な場合、どのようなコードを足せばよろしいでしょうか?
現在のコードは以下の通りです。
import numpy as np
...
1
票
0回答
56 件の閲覧数
multi-output classification and regression
python scikit-learn にて RandomForestを用いたプログラムを実装中です.
n個の目的変数を分類,回帰で分析する際にn個モデルを作るのではなく
一つのモデルでn個の出力をするmulti-output classification and regression について
調べています.
scikit-...
1
票
1回答
144 件の閲覧数
特徴量として使えるデータを平均の差から見つけ出す方法
クラスタリングを行う上で、特徴量を選択する際に「平均の差」を使おうと考えています。
複数ある属性のうち、平均差が大きいものを特徴量として選択すれば、より適切に集団を分割できるのではないかと考えています。
その際の「平均の差を比較する」方法がわかりません。
例えば、高校のクラスが2つ(A組、B組)あったとし、
それぞれ身長の平均(cm)、体重の平均(kg)、アルバイト収入の平均(円)...
0
票
1回答
109 件の閲覧数
sklearnのpairwise_kernelsの引数について
環境: Macbook air, Jupyter-Notebook, Python2.7
Kernel K-meansを実装する際、一部この方のコードを参考にしました。
具体的には
def _get_kernel(self, X, Y=None):
if callable(self.kernel):
params = self.kernel_params or {}
...
3
票
1回答
1,417 件の閲覧数
Pythonを使ってロジスティック回帰したときのP値
Python、機械学習についてここ1週間くらいでやりはじめた初心者です。
とても初歩的な質問で申し訳ありませんが、何卒お願いします。
Pythonを使ってロジスティック回帰分析をしようと思っています。
以下のようなユーザーデータを持っています。
年齢・性別・年収と、購入したかどうかの0or1のフラグです。
ユーザid, 年齢, 性別, 年収, 購入フラグ
1 , 30, ...
0
票
1回答
228 件の閲覧数
sklearn を使ったコードが PyCharm で実行できない
PyCharmで下のようなコードを実行すると
from sklearn import svm
xor_data = [
P, Q, result
[0, 0, 0],
[0, 1, 1],
[1, 0, 1],
[1, 1, 0]
]
data = []
label = []
for row in xor_data:
p = row[0]
q = row[1]
r = row[2]
...
0
票
1回答
816 件の閲覧数
BaggingClassifierのパラメーターについて
clf = DecisionTreeClassifier(criterion='entropy', max_depth=1)
sklearn.ensemble.BaggingClassifier(base_estimator=clf, n_estimators=10, max_samples=1, max_features=1)
...
0
票
1回答
397 件の閲覧数
scikit-learnで同じトレーニングデータを使用しても異なるパラメータが得られる
Qiita の https://qiita.com/sugulu/items/5c1b03cd445f27fd3e28 こちらの投稿を参考に自分でプログラムを書いてみたのですが、トレーニングデータは同じはずなのに元のコードで得られたパラメータと異なるパラメータが算出されてしまいます。
こちらが参考にさせていただいたコードです。
import numpy as np
import pandas ...
0
票
1回答
292 件の閲覧数
scikit-learn ライブラリを継承した自作クラスのオブジェクト生成時にエラー : TypeError: 'module' object is not callable が発生してしまう。又、自身のオブジェクトを表す self が 意図に反して None となってしまう。
自作クラスのオブジェクト作成時の挙動と、自身のオブジェクトを表す self の挙動に関して、
以下の2つの不明点があり解決出来ません。
解決方法を教えて頂きたいですm(__)m
1. 1つ目の不明点(自作クラスのオブジェクト生成時の挙動)
scikit-learn ライブラリの推定器 estimator の基本クラス sklearn.base.BaseEstimator,sklearn....
1
票
1回答
750 件の閲覧数
sklearnでImportError: cannot import name cloneというエラーが出る
pythonでランダムフォレストを使おうとしているのですが,以下のエラーが出てきます。
どうすればよいのかご教授お願い致します。
Traceback (most recent call last):
File "random.py", line 4, in <module>
from sklearn.ensemble import ...
0
票
1回答
4,278 件の閲覧数
ImportError: cannot import name Randomというエラーが出る
sklearnでランダムフォレストを使おうとしているのですが,以下のエラーが出てきます。
まず簡単なものでやってみようと思い,ネットに出ているコードをそのまま使用しました。
どうしたらよいでしょうか。
コード
from sklearn.ensemble import RandomForestClassifier
trainingdata = [[1, 1], [2, 2], [-1, -1],...
0
票
2回答
1,878 件の閲覧数
Scikit-learnでクラス数を考慮してデータを分割したい
以下のように、scikit-learnの関数train_test_splitを用いると、
dataset_train, dataset_test = train_test_split(dataset, train_size=0.8)
データセットを訓練データとテストデータに分割はしてくれるのですが、
クラス数が多い(例えば100クラス)場合だと、
...
0
票
1回答
935 件の閲覧数
sklearnのTfidfVectorizerについて
sklearnでKMeansを利用しようと考えています。
https://github.com/luispedro/BuildingMachineLearningSystemsWithPython/blob/master/ch03/rel_post_20news.py
上記のサンプルを参考にしています。
上記サンプルのL58でTfidfVectorizer.fit_transform()...
2
票
1回答
3,644 件の閲覧数
pythonでscikit-learnを用いたらImportErrorが起きてしまいます
技術評論社のデータサイエンティスト養成読本 機械学習入門編を読んでいます
128ページからscikit-learn入門のページが始まるのですが
そちらにあるコードを試したところ、scikit-learnのImportErrorが起きてしまいます
何が悪いのかわかりませんが・・・どなたかご存知の方はいらっしゃらないでしょうか?
Mac OSX 10.9
python 3.4.3
...
3
票
1回答
8,701 件の閲覧数
scikit-learnを用いて主成分分析 (PCA) した結果から元の画像データを復元したい
画像処理を行っていて、特徴量抽出に scikit-learn の PCA を使いましたが、様々な処理を行った後その結果から画像を復元したい(参考(これをpythonでやりたい):R prcomp での主成分分析結果から元データを復元する)。
具体的には以下のようなコードになっています。
from sklearn.decomposition import PCA
from PIL import ...