[scikit-learn] タグが付いた質問

scikit-learnはPython向けの機械学習ライブラリで、データ解析やデータマイニング用にシンプルで効率的なツールを提供します。誰でも利用しやすく、様々な状況で再利用できます。NumPy, SciPy, matplotlibを用いて構築されています。このプロジェクトはオープンソースで、商用利用が可能です。(BSDライセンス)

絞り込み
並べ替え
タグ付けされた
0
0 回答
114 閲覧数

VSCode上のJupyter Notebookで、sklearn配下のメンバーを呼び出そうとすると静的解析ではエラーが出るけど実行できる

質問者はPython初心者です。パッケージ本体のこともあんまりわかってません。 状況 Pythonを使ったデータ分析関連。Pandas-Profilingを使おうとしてます。 Pandas-Profilingに渡すデータを作るのにsklearnを使おうとしたんですが、そこでpylanceがエラーを吐く。でも、実行できます。 と、思ったら、実際にPandas-...
石のトンネル's user avatar
0
0 回答
52 閲覧数

google colab上で部分依存プロットをインポートできない

from sklearn.inspection import plot_partial_dependenc ImportError: cannot import name 'plot_partial_dependence' from 'sklearn.inspection' (/usr/local/lib/python3.10/dist-packages/sklearn/inspection/...
keyri's user avatar
  • 29
0
0 回答
43 閲覧数

PyCaretで特徴量が変わることについて教えてください ValueError: Number of features of the model must match the input. Model n_features_ is 1025 and input n_features is 4104

PyCaretでsetupするときの前処理で、Original Dataのshape(281,4015)から、Transformed Train Set(196, 1046), Transformed Test Set(85, 1046)に変わる部分が分かりません このため以下のエラーが発生する原因になっています 背景として、添付のモノクロ顔画像の感情分類データ(120, 128,3) 46,...
Ta Ma's user avatar
  • 1
0
0 回答
114 閲覧数

scikit-learn でエラー:'Series' object has no attribute 'reshape'

Pythonで X_train = X_train.reshape(1, -1) を実行したところエラーが起きてしまいまして。初心者で質問も多いですが、指摘よろしくお願いいたします。 import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import csv ...
keyri's user avatar
  • 29
0
2 回答
195 閲覧数

scikit-learn でエラー: ValueError: Expected 2D array, got 1D array instead:

sklearnでトレーニングテータとテストデータを分けて決定木アルゴリズムにフィットさせようとしたところエラーが起きました。 解決方法がわからないため、もしよかったら指摘よろしくお願いします。 import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import csv ...
keyri's user avatar
  • 29
0
1 回答
133 閲覧数

scikit-learn の train_test_split でエラー: ValueError: not enough values to unpack (expected 5, got 4)

Python初心者で機械学習を使用した疫学研究をしていますが進め方が合っているかどうかもわからないです。現在、ハイパーパラメータ調整で躓いています。もしよければアドバイス、指摘をお願いします。 import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import csv ...
keyri's user avatar
  • 29
0
1 回答
555 閲覧数

scikit-learnのErrorメッセージ”cannot import name 'plot_confusion_matrix' from 'sklearn.metrics' の解消方法につき、どなたかご教示ください。

SVMのregressoarを用いて、金融市場の評価分析を行おうとしています。 テキストを参考にコーディングしたところ、最終行の plot_confusion_matrix, plot_roc_curve でエラーとなってしまい、先に進めません(メッセージ内容は、タイトル通り)。 エラーメッセージをgoogleで検索し、PIPやsciket-learnのupdateを行い、...
Sanko_Jyutsugetsu_En's user avatar
2
2 回答
220 閲覧数

ライブラリとフレームワークの違いとは?

ライブラリとフレームワークの違いとはなんでしょうか。 G検定の勉強をしていたら NumPy scikit-learn が、ライブラリの説明の箇所でもフレームワークの説明の箇所でも登場しました。 両者はたまたま両方にまたがるものなんでしょうか?
モルフォ's user avatar
0
0 回答
58 閲覧数

説明変数の標準化/正規化とsklearnのパイプラインについて

説明変数(x)の標準化、正規化の必要性は広く知れ渡るところですが、目的変数(y)の標準化/正規化は行うべきなのでしょうか?また、行うべきである場合、sklearnのパイプラインにはどうやって 目的変数のtransform,inverse_transformを組み込むのでしょうか? 私はこれまで、いくつの資料、研修、サンプルコードから、目的変数の標準化は必要なものと理解していましたが、...
tomo1992's user avatar
0
1 回答
113 閲覧数

ElasticNetCVの引数n_alphasについて

scikit-learn公式ドキュメントには「Number of alphas along the regularization path, used for each l1_ratio.」とありますが、Elasticnetの「n_alpha」という引数はどのようなものかご教授いただけますでしょうか。
hrms's user avatar
  • 1
0
1 回答
98 閲覧数

scikit-learnで偽陽性だったもの(データの配列番号)を出力して確認するにはどうすればよいでしょうか?

実装は以下のサイトのものをそのまま使用しました. https://www.haya-programming.com/entry/2018/02/22/234011 混同行列(confusion_matrix)が以下のようになったため,どのデータが分類に失敗したのかが気になります. [[1699 1] [ 0 1936]] ...
kita4b's user avatar
  • 5
0
1 回答
78 閲覧数

Scikit-learnのGridSearchCVについて

初歩的な質問で申し訳ありません。 Scikit learnのGridSearchCVはグリッドサーチだけでなく、引数cv=5とすれば5分割の交差検証も行ってくれるのですか? ご存じありましたら、ご回答いただけたらと思います。 よろしくお願いします。 (グリッドサーチと交差検証について学んでおりまして、グリッドサーチに関してはそれなりにできたのですが、交差検証の方がいろいろと手こずっていたのですが、、...
qkun's user avatar
  • 19
0
1 回答
321 閲覧数

kerasとscikit-learnによるaccuracyの算出方法による違いはありますか?

私は現在マルチラベルの画像分類をkerasのCNNを用いて行っています。 また、kerasのaccuracyだけでなくscikit-learnの様々な評価方法(Recall, Precision, F1 scoreそしてAccuracy)を用いて精度の再確認を行いました。 結果としてkerasで算出したAccuracyは約90%を示すのに、scikit-learnはどれも60%前後しか示しません。 ...
R type's user avatar
  • 51
0
0 回答
144 閲覧数

pythonライブラリhmmlearnのAttributeError

実行したコード from hmmlearn import hmm model = hmm.GaussianHMM(n_components=5, n_iter=100) model.covars_ 吐き出されたエラー文 --------------------------------------------------------------------------- ...
Irie Ryo's user avatar
4
2 回答
1,341 閲覧数

訓練データとテストデータの評価の差

ある数値を予測するコンペの問題をPythonでやってます。 与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。 https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook 上記を参考にして、取り出したデータをもとにLASSO ...
user35888's user avatar
0
1 回答
1,541 閲覧数

sklearnでのモデル再学習について

現在Pythonのsklearnを用いて、機械学習を行っています。 モデルを作成し、そのモデルから予測をすることはできています。 そこで質問なのですが、このモデルを再度学習したい場合そのモデルを用いて 追加学習をすることはできるのでしょうか。 もしくは、以前学習に使用したデータを用いなければならないのでしょうか。 基本的な質問かもしれませんがよろしくお願いいたします。
kakaro's user avatar
  • 1
0
1 回答
258 閲覧数

Kerasを使った学習済みモデルで実際にテスト用データを用いてクラスタリングをしたい

学習済みCNNの評価に使用したテストデータを用いて実際にクラスタリングした結果を取得したいです。 Kerasを使ってクラスタリングを行うネットワークの構築を行っています。 学習および評価に使用する画像を次のように取得しました target_dir = "TargetDir" data_df = pd.read_csv(target_dir+'data_sheet.csv') file_list ...
codeZ's user avatar
  • 397
0
1 回答
146 閲覧数

scikit-learn matplotlib軸を定義したい クラスタ分析

湿度センサと心拍センサを用いて感情別にクラスタ分析をしようと思っています。 各センサから取得したデータをcsvファイルに保存し、read_csvで読み込みmatplotlib で可視化させているのですが、図のようになってしまいます。 縦軸を心拍数、横軸を湿度として値を表示させるにはどのようにすればいいのでしょうか? 手動で範囲を決める、set_ylim([min,max])を用いるべきなのか ...
loudog's user avatar
  • 7
0
1 回答
567 閲覧数

k-means法sickit-learn クラスタリング エラー解決方法

心拍センサで取得したデータをcsvファイルへ保存しread_csvを行いk-means法を用いて2種類(感情別(画像参照;1、落ち着いている 2、イライラしている))にクラスタリングしたいのですが、 ValueError; Found array with 0 feature(s) (shape=(30,0)) while a minimum of 1 is required. ...
loudog's user avatar
  • 7
2
2 回答
146 閲覧数

分類問題における評価方法について

機械学習を研究で初めてまだ初心者です。研究で4クラス分類の問題を扱っててaccuracyやprecisionやrecallを算出したいです。 データ数が少ない(30件ほど)で分割のされ方によってスコアにかなり影響を受けてしまいます。交差検証したときのばらつきが大きくて(例えばaccuracyが[0.83333333 0.72727273 0.44444444]など)評価方法に困っています。...
user31202's user avatar
0
1 回答
514 閲覧数

ランダムフォレスト 、一つ抜き交差検証におけるfeature importanceの出力

ランダムフォレスト、一つ抜き交差検証を用いて、予測モデルの作成を行っています。 ランダムフォレストでは、feature importanceを出力できますが、一つ抜き交差検証を用いた時の、平均のfeature importanceを出力することは可能なのでしょうか? 可能な場合、どのようなコードを足せばよろしいでしょうか? 現在のコードは以下の通りです。 import numpy as np ...
pk-dss's user avatar
  • 3
2
0 回答
97 閲覧数

multi-output classification and regression

python scikit-learn にて RandomForestを用いたプログラムを実装中です. n個の目的変数を分類,回帰で分析する際にn個モデルを作るのではなく 一つのモデルでn個の出力をするmulti-output classification and regression について 調べています. scikit-...
ますみとも's user avatar
1
1 回答
395 閲覧数

特徴量として使えるデータを平均の差から見つけ出す方法

クラスタリングを行う上で、特徴量を選択する際に「平均の差」を使おうと考えています。 複数ある属性のうち、平均差が大きいものを特徴量として選択すれば、より適切に集団を分割できるのではないかと考えています。 その際の「平均の差を比較する」方法がわかりません。 例えば、高校のクラスが2つ(A組、B組)あったとし、 それぞれ身長の平均(cm)、体重の平均(kg)、アルバイト収入の平均(円)...
bbpencil's user avatar
1
2 回答
1,040 閲覧数

時系列の特徴量の作成の仕方

機械学習における、時系列の特徴量作成に関して質問です。 以下の添付した画像から、例えば ・Morning直後はある値が増加傾向にある。 ・NoonもMorningと比べて大きな変化量はないが、増加傾向にある。 ・Eveningも大きな変化量はないが、増加傾向にある。 こういった事実現象を時系列の特徴量として、表現するにはどういった方法がありますでしょうか 機械学習に精通している皆様方、...
Tatuya Hoshi's user avatar
0
1 回答
272 閲覧数

sklearnのpairwise_kernelsの引数について

環境: Macbook air, Jupyter-Notebook, Python2.7 Kernel K-meansを実装する際、一部この方のコードを参考にしました。 具体的には def _get_kernel(self, X, Y=None): if callable(self.kernel): params = self.kernel_params or {} ...
user avatar
3
1 回答
2,751 閲覧数

Pythonを使ってロジスティック回帰したときのP値

Python、機械学習についてここ1週間くらいでやりはじめた初心者です。 とても初歩的な質問で申し訳ありませんが、何卒お願いします。 Pythonを使ってロジスティック回帰分析をしようと思っています。 以下のようなユーザーデータを持っています。 年齢・性別・年収と、購入したかどうかの0or1のフラグです。 ユーザid, 年齢, 性別, 年収, 購入フラグ 1 , 30, ...
mathew's user avatar
  • 47
0
1 回答
272 閲覧数

sklearn を使ったコードが PyCharm で実行できない

PyCharmで下のようなコードを実行すると from sklearn import svm xor_data = [ P, Q, result [0, 0, 0], [0, 1, 1], [1, 0, 1], [1, 1, 0] ] data = [] label = [] for row in xor_data: p = row[0] q = row[1] r = row[2] ...
ももこぐみ's user avatar
1
1 回答
1,371 閲覧数

BaggingClassifierのパラメーターについて

clf = DecisionTreeClassifier(criterion='entropy', max_depth=1) sklearn.ensemble.BaggingClassifier(base_estimator=clf, n_estimators=10, max_samples=1, max_features=1) ...
pkoko's user avatar
  • 273
0
1 回答
590 閲覧数

scikit-learnで同じトレーニングデータを使用しても異なるパラメータが得られる

Qiita の https://qiita.com/sugulu/items/5c1b03cd445f27fd3e28 こちらの投稿を参考に自分でプログラムを書いてみたのですが、トレーニングデータは同じはずなのに元のコードで得られたパラメータと異なるパラメータが算出されてしまいます。 こちらが参考にさせていただいたコードです。 import numpy as np import pandas ...
Mukudori's user avatar
0
1 回答
1,139 閲覧数

scikit-learn ライブラリを継承した自作クラスのオブジェクト生成時にエラー : TypeError: 'module' object is not callable が発生してしまう。又、自身のオブジェクトを表す self が 意図に反して None となってしまう。

自作クラスのオブジェクト作成時の挙動と、自身のオブジェクトを表す self の挙動に関して、 以下の2つの不明点があり解決出来ません。 解決方法を教えて頂きたいですm(__)m 1. 1つ目の不明点(自作クラスのオブジェクト生成時の挙動) scikit-learn ライブラリの推定器 estimator の基本クラス sklearn.base.BaseEstimator,sklearn....
Yagami's user avatar
  • 69
0
2 回答
5,528 閲覧数

sklearnのn_jobsについて

sklearnのランダムフォレストのグリッドサーチをしようと思い,以下のようにグリッドサーチのコードを使おうとしました.n_jobsを-1にすると最適なコア数で並列計算されるとのことだったのでそのようにしたのですが,一日置いてもまったく計算が終わる気配がなく,n_jobs=1とすると数秒で終わるという状態になっています.メモリやCPUの使用率は100%に近くなっており動いてはいるのですが,...
user22920's user avatar
0
1 回答
5,663 閲覧数

ImportError: cannot import name Randomというエラーが出る

sklearnでランダムフォレストを使おうとしているのですが,以下のエラーが出てきます。 まず簡単なものでやってみようと思い,ネットに出ているコードをそのまま使用しました。 どうしたらよいでしょうか。 コード from sklearn.ensemble import RandomForestClassifier trainingdata = [[1, 1], [2, 2], [-1, -1],...
blue_bird's user avatar
1
1 回答
1,300 閲覧数

sklearnでImportError: cannot import name cloneというエラーが出る

pythonでランダムフォレストを使おうとしているのですが,以下のエラーが出てきます。 どうすればよいのかご教授お願い致します。 Traceback (most recent call last): File "random.py", line 4, in <module> from sklearn.ensemble import ...
blue_bird's user avatar
0
2 回答
2,281 閲覧数

Scikit-learnでクラス数を考慮してデータを分割したい

以下のように、scikit-learnの関数train_test_splitを用いると、 dataset_train, dataset_test = train_test_split(dataset, train_size=0.8) データセットを訓練データとテストデータに分割はしてくれるのですが、 クラス数が多い(例えば100クラス)場合だと、 ...
neco's user avatar
  • 317
2
1 回答
3,724 閲覧数

scikit-learn/k-meansを使った画像のクラスタリングでのエラー

ディレクトリ内のjpg画像ファイルをSURFを用いて、特徴量を抽出し、すべてのSURFをk-means法でグループ化して基本特徴量(visual word)を求め、これを使って画像の局所特徴量リストをbag-of-wordsリストにするプログラムがあります。 試しに、90枚ほどの画像でやるとうまくグループわけができましたが、いざ1900枚ほどの画像でやってみると、...
python-noob's user avatar
0
1 回答
1,128 閲覧数

sklearnのTfidfVectorizerについて

sklearnでKMeansを利用しようと考えています。 https://github.com/luispedro/BuildingMachineLearningSystemsWithPython/blob/master/ch03/rel_post_20news.py 上記のサンプルを参考にしています。 上記サンプルのL58でTfidfVectorizer.fit_transform()...
StackDestroyer's user avatar
2
1 回答
5,761 閲覧数

pythonでscikit-learnを用いたらImportErrorが起きてしまいます

技術評論社のデータサイエンティスト養成読本 機械学習入門編を読んでいます 128ページからscikit-learn入門のページが始まるのですが そちらにあるコードを試したところ、scikit-learnのImportErrorが起きてしまいます 何が悪いのかわかりませんが・・・どなたかご存知の方はいらっしゃらないでしょうか? Mac OSX 10.9 python 3.4.3 ...
YoheiK's user avatar
  • 99
3
1 回答
1万 閲覧数

scikit-learnを用いて主成分分析 (PCA) した結果から元の画像データを復元したい

画像処理を行っていて、特徴量抽出に scikit-learn の PCA を使いましたが、様々な処理を行った後その結果から画像を復元したい(参考(これをpythonでやりたい):R prcomp での主成分分析結果から元データを復元する)。 具体的には以下のようなコードになっています。 from sklearn.decomposition import PCA from PIL import ...
pixy's user avatar
  • 150