[scikit-learn] タグが付いた質問
scikit-learnはPython向けの機械学習ライブラリで、データ解析やデータマイニング用にシンプルで効率的なツールを提供します。誰でも利用しやすく、様々な状況で再利用できます。NumPy, SciPy, matplotlibを用いて構築されています。このプロジェクトはオープンソースで、商用利用が可能です。(BSDライセンス)
38
質問
0
票
0
回答
114
閲覧数
VSCode上のJupyter Notebookで、sklearn配下のメンバーを呼び出そうとすると静的解析ではエラーが出るけど実行できる
質問者はPython初心者です。パッケージ本体のこともあんまりわかってません。
状況
Pythonを使ったデータ分析関連。Pandas-Profilingを使おうとしてます。
Pandas-Profilingに渡すデータを作るのにsklearnを使おうとしたんですが、そこでpylanceがエラーを吐く。でも、実行できます。
と、思ったら、実際にPandas-...
0
票
0
回答
52
閲覧数
google colab上で部分依存プロットをインポートできない
from sklearn.inspection import plot_partial_dependenc
ImportError: cannot import name 'plot_partial_dependence' from 'sklearn.inspection' (/usr/local/lib/python3.10/dist-packages/sklearn/inspection/...
0
票
0
回答
43
閲覧数
PyCaretで特徴量が変わることについて教えてください ValueError: Number of features of the model must match the input. Model n_features_ is 1025 and input n_features is 4104
PyCaretでsetupするときの前処理で、Original Dataのshape(281,4015)から、Transformed Train Set(196, 1046), Transformed Test Set(85, 1046)に変わる部分が分かりません
このため以下のエラーが発生する原因になっています
背景として、添付のモノクロ顔画像の感情分類データ(120, 128,3) 46,...
0
票
0
回答
114
閲覧数
scikit-learn でエラー:'Series' object has no attribute 'reshape'
Pythonで X_train = X_train.reshape(1, -1) を実行したところエラーが起きてしまいまして。初心者で質問も多いですが、指摘よろしくお願いいたします。
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as sns
import csv
...
0
票
2
回答
195
閲覧数
scikit-learn でエラー: ValueError: Expected 2D array, got 1D array instead:
sklearnでトレーニングテータとテストデータを分けて決定木アルゴリズムにフィットさせようとしたところエラーが起きました。
解決方法がわからないため、もしよかったら指摘よろしくお願いします。
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as sns
import csv
...
0
票
1
回答
133
閲覧数
scikit-learn の train_test_split でエラー: ValueError: not enough values to unpack (expected 5, got 4)
Python初心者で機械学習を使用した疫学研究をしていますが進め方が合っているかどうかもわからないです。現在、ハイパーパラメータ調整で躓いています。もしよければアドバイス、指摘をお願いします。
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as sns
import csv
...
0
票
1
回答
555
閲覧数
scikit-learnのErrorメッセージ”cannot import name 'plot_confusion_matrix' from 'sklearn.metrics' の解消方法につき、どなたかご教示ください。
SVMのregressoarを用いて、金融市場の評価分析を行おうとしています。
テキストを参考にコーディングしたところ、最終行の plot_confusion_matrix, plot_roc_curve でエラーとなってしまい、先に進めません(メッセージ内容は、タイトル通り)。
エラーメッセージをgoogleで検索し、PIPやsciket-learnのupdateを行い、...
2
票
2
回答
220
閲覧数
ライブラリとフレームワークの違いとは?
ライブラリとフレームワークの違いとはなんでしょうか。
G検定の勉強をしていたら
NumPy
scikit-learn
が、ライブラリの説明の箇所でもフレームワークの説明の箇所でも登場しました。
両者はたまたま両方にまたがるものなんでしょうか?
0
票
0
回答
58
閲覧数
説明変数の標準化/正規化とsklearnのパイプラインについて
説明変数(x)の標準化、正規化の必要性は広く知れ渡るところですが、目的変数(y)の標準化/正規化は行うべきなのでしょうか?また、行うべきである場合、sklearnのパイプラインにはどうやって 目的変数のtransform,inverse_transformを組み込むのでしょうか?
私はこれまで、いくつの資料、研修、サンプルコードから、目的変数の標準化は必要なものと理解していましたが、...
0
票
1
回答
113
閲覧数
ElasticNetCVの引数n_alphasについて
scikit-learn公式ドキュメントには「Number of alphas along the regularization path, used for each l1_ratio.」とありますが、Elasticnetの「n_alpha」という引数はどのようなものかご教授いただけますでしょうか。
0
票
1
回答
98
閲覧数
scikit-learnで偽陽性だったもの(データの配列番号)を出力して確認するにはどうすればよいでしょうか?
実装は以下のサイトのものをそのまま使用しました.
https://www.haya-programming.com/entry/2018/02/22/234011
混同行列(confusion_matrix)が以下のようになったため,どのデータが分類に失敗したのかが気になります.
[[1699 1]
[ 0 1936]]
...
0
票
1
回答
78
閲覧数
Scikit-learnのGridSearchCVについて
初歩的な質問で申し訳ありません。
Scikit learnのGridSearchCVはグリッドサーチだけでなく、引数cv=5とすれば5分割の交差検証も行ってくれるのですか?
ご存じありましたら、ご回答いただけたらと思います。
よろしくお願いします。
(グリッドサーチと交差検証について学んでおりまして、グリッドサーチに関してはそれなりにできたのですが、交差検証の方がいろいろと手こずっていたのですが、、...
0
票
1
回答
321
閲覧数
kerasとscikit-learnによるaccuracyの算出方法による違いはありますか?
私は現在マルチラベルの画像分類をkerasのCNNを用いて行っています。
また、kerasのaccuracyだけでなくscikit-learnの様々な評価方法(Recall, Precision, F1 scoreそしてAccuracy)を用いて精度の再確認を行いました。
結果としてkerasで算出したAccuracyは約90%を示すのに、scikit-learnはどれも60%前後しか示しません。
...
0
票
0
回答
144
閲覧数
pythonライブラリhmmlearnのAttributeError
実行したコード
from hmmlearn import hmm
model = hmm.GaussianHMM(n_components=5, n_iter=100)
model.covars_
吐き出されたエラー文
---------------------------------------------------------------------------
...
4
票
2
回答
1,341
閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
0
票
1
回答
1,541
閲覧数
sklearnでのモデル再学習について
現在Pythonのsklearnを用いて、機械学習を行っています。
モデルを作成し、そのモデルから予測をすることはできています。
そこで質問なのですが、このモデルを再度学習したい場合そのモデルを用いて
追加学習をすることはできるのでしょうか。
もしくは、以前学習に使用したデータを用いなければならないのでしょうか。
基本的な質問かもしれませんがよろしくお願いいたします。
0
票
1
回答
258
閲覧数
Kerasを使った学習済みモデルで実際にテスト用データを用いてクラスタリングをしたい
学習済みCNNの評価に使用したテストデータを用いて実際にクラスタリングした結果を取得したいです。
Kerasを使ってクラスタリングを行うネットワークの構築を行っています。
学習および評価に使用する画像を次のように取得しました
target_dir = "TargetDir"
data_df = pd.read_csv(target_dir+'data_sheet.csv')
file_list ...
0
票
1
回答
146
閲覧数
scikit-learn matplotlib軸を定義したい クラスタ分析
湿度センサと心拍センサを用いて感情別にクラスタ分析をしようと思っています。
各センサから取得したデータをcsvファイルに保存し、read_csvで読み込みmatplotlib で可視化させているのですが、図のようになってしまいます。
縦軸を心拍数、横軸を湿度として値を表示させるにはどのようにすればいいのでしょうか?
手動で範囲を決める、set_ylim([min,max])を用いるべきなのか
...
0
票
1
回答
567
閲覧数
k-means法sickit-learn クラスタリング エラー解決方法
心拍センサで取得したデータをcsvファイルへ保存しread_csvを行いk-means法を用いて2種類(感情別(画像参照;1、落ち着いている 2、イライラしている))にクラスタリングしたいのですが、
ValueError; Found array with 0 feature(s) (shape=(30,0)) while a minimum of 1 is required.
...
2
票
2
回答
146
閲覧数
分類問題における評価方法について
機械学習を研究で初めてまだ初心者です。研究で4クラス分類の問題を扱っててaccuracyやprecisionやrecallを算出したいです。
データ数が少ない(30件ほど)で分割のされ方によってスコアにかなり影響を受けてしまいます。交差検証したときのばらつきが大きくて(例えばaccuracyが[0.83333333 0.72727273 0.44444444]など)評価方法に困っています。...
0
票
1
回答
514
閲覧数
ランダムフォレスト 、一つ抜き交差検証におけるfeature importanceの出力
ランダムフォレスト、一つ抜き交差検証を用いて、予測モデルの作成を行っています。
ランダムフォレストでは、feature importanceを出力できますが、一つ抜き交差検証を用いた時の、平均のfeature importanceを出力することは可能なのでしょうか?
可能な場合、どのようなコードを足せばよろしいでしょうか?
現在のコードは以下の通りです。
import numpy as np
...
2
票
0
回答
97
閲覧数
multi-output classification and regression
python scikit-learn にて RandomForestを用いたプログラムを実装中です.
n個の目的変数を分類,回帰で分析する際にn個モデルを作るのではなく
一つのモデルでn個の出力をするmulti-output classification and regression について
調べています.
scikit-...
1
票
1
回答
395
閲覧数
特徴量として使えるデータを平均の差から見つけ出す方法
クラスタリングを行う上で、特徴量を選択する際に「平均の差」を使おうと考えています。
複数ある属性のうち、平均差が大きいものを特徴量として選択すれば、より適切に集団を分割できるのではないかと考えています。
その際の「平均の差を比較する」方法がわかりません。
例えば、高校のクラスが2つ(A組、B組)あったとし、
それぞれ身長の平均(cm)、体重の平均(kg)、アルバイト収入の平均(円)...
1
票
2
回答
1,040
閲覧数
時系列の特徴量の作成の仕方
機械学習における、時系列の特徴量作成に関して質問です。
以下の添付した画像から、例えば
・Morning直後はある値が増加傾向にある。
・NoonもMorningと比べて大きな変化量はないが、増加傾向にある。
・Eveningも大きな変化量はないが、増加傾向にある。
こういった事実現象を時系列の特徴量として、表現するにはどういった方法がありますでしょうか
機械学習に精通している皆様方、...
0
票
1
回答
272
閲覧数
sklearnのpairwise_kernelsの引数について
環境: Macbook air, Jupyter-Notebook, Python2.7
Kernel K-meansを実装する際、一部この方のコードを参考にしました。
具体的には
def _get_kernel(self, X, Y=None):
if callable(self.kernel):
params = self.kernel_params or {}
...
3
票
1
回答
2,751
閲覧数
Pythonを使ってロジスティック回帰したときのP値
Python、機械学習についてここ1週間くらいでやりはじめた初心者です。
とても初歩的な質問で申し訳ありませんが、何卒お願いします。
Pythonを使ってロジスティック回帰分析をしようと思っています。
以下のようなユーザーデータを持っています。
年齢・性別・年収と、購入したかどうかの0or1のフラグです。
ユーザid, 年齢, 性別, 年収, 購入フラグ
1 , 30, ...
0
票
1
回答
272
閲覧数
sklearn を使ったコードが PyCharm で実行できない
PyCharmで下のようなコードを実行すると
from sklearn import svm
xor_data = [
P, Q, result
[0, 0, 0],
[0, 1, 1],
[1, 0, 1],
[1, 1, 0]
]
data = []
label = []
for row in xor_data:
p = row[0]
q = row[1]
r = row[2]
...
1
票
1
回答
1,371
閲覧数
BaggingClassifierのパラメーターについて
clf = DecisionTreeClassifier(criterion='entropy', max_depth=1)
sklearn.ensemble.BaggingClassifier(base_estimator=clf, n_estimators=10, max_samples=1, max_features=1)
...
0
票
1
回答
590
閲覧数
scikit-learnで同じトレーニングデータを使用しても異なるパラメータが得られる
Qiita の https://qiita.com/sugulu/items/5c1b03cd445f27fd3e28 こちらの投稿を参考に自分でプログラムを書いてみたのですが、トレーニングデータは同じはずなのに元のコードで得られたパラメータと異なるパラメータが算出されてしまいます。
こちらが参考にさせていただいたコードです。
import numpy as np
import pandas ...
0
票
1
回答
1,139
閲覧数
scikit-learn ライブラリを継承した自作クラスのオブジェクト生成時にエラー : TypeError: 'module' object is not callable が発生してしまう。又、自身のオブジェクトを表す self が 意図に反して None となってしまう。
自作クラスのオブジェクト作成時の挙動と、自身のオブジェクトを表す self の挙動に関して、
以下の2つの不明点があり解決出来ません。
解決方法を教えて頂きたいですm(__)m
1. 1つ目の不明点(自作クラスのオブジェクト生成時の挙動)
scikit-learn ライブラリの推定器 estimator の基本クラス sklearn.base.BaseEstimator,sklearn....
0
票
2
回答
5,528
閲覧数
sklearnのn_jobsについて
sklearnのランダムフォレストのグリッドサーチをしようと思い,以下のようにグリッドサーチのコードを使おうとしました.n_jobsを-1にすると最適なコア数で並列計算されるとのことだったのでそのようにしたのですが,一日置いてもまったく計算が終わる気配がなく,n_jobs=1とすると数秒で終わるという状態になっています.メモリやCPUの使用率は100%に近くなっており動いてはいるのですが,...
0
票
1
回答
5,663
閲覧数
ImportError: cannot import name Randomというエラーが出る
sklearnでランダムフォレストを使おうとしているのですが,以下のエラーが出てきます。
まず簡単なものでやってみようと思い,ネットに出ているコードをそのまま使用しました。
どうしたらよいでしょうか。
コード
from sklearn.ensemble import RandomForestClassifier
trainingdata = [[1, 1], [2, 2], [-1, -1],...
1
票
1
回答
1,300
閲覧数
sklearnでImportError: cannot import name cloneというエラーが出る
pythonでランダムフォレストを使おうとしているのですが,以下のエラーが出てきます。
どうすればよいのかご教授お願い致します。
Traceback (most recent call last):
File "random.py", line 4, in <module>
from sklearn.ensemble import ...
0
票
2
回答
2,281
閲覧数
Scikit-learnでクラス数を考慮してデータを分割したい
以下のように、scikit-learnの関数train_test_splitを用いると、
dataset_train, dataset_test = train_test_split(dataset, train_size=0.8)
データセットを訓練データとテストデータに分割はしてくれるのですが、
クラス数が多い(例えば100クラス)場合だと、
...
2
票
1
回答
3,724
閲覧数
scikit-learn/k-meansを使った画像のクラスタリングでのエラー
ディレクトリ内のjpg画像ファイルをSURFを用いて、特徴量を抽出し、すべてのSURFをk-means法でグループ化して基本特徴量(visual word)を求め、これを使って画像の局所特徴量リストをbag-of-wordsリストにするプログラムがあります。
試しに、90枚ほどの画像でやるとうまくグループわけができましたが、いざ1900枚ほどの画像でやってみると、...
0
票
1
回答
1,128
閲覧数
sklearnのTfidfVectorizerについて
sklearnでKMeansを利用しようと考えています。
https://github.com/luispedro/BuildingMachineLearningSystemsWithPython/blob/master/ch03/rel_post_20news.py
上記のサンプルを参考にしています。
上記サンプルのL58でTfidfVectorizer.fit_transform()...
2
票
1
回答
5,761
閲覧数
pythonでscikit-learnを用いたらImportErrorが起きてしまいます
技術評論社のデータサイエンティスト養成読本 機械学習入門編を読んでいます
128ページからscikit-learn入門のページが始まるのですが
そちらにあるコードを試したところ、scikit-learnのImportErrorが起きてしまいます
何が悪いのかわかりませんが・・・どなたかご存知の方はいらっしゃらないでしょうか?
Mac OSX 10.9
python 3.4.3
...
3
票
1
回答
1万
閲覧数
scikit-learnを用いて主成分分析 (PCA) した結果から元の画像データを復元したい
画像処理を行っていて、特徴量抽出に scikit-learn の PCA を使いましたが、様々な処理を行った後その結果から画像を復元したい(参考(これをpythonでやりたい):R prcomp での主成分分析結果から元データを復元する)。
具体的には以下のようなコードになっています。
from sklearn.decomposition import PCA
from PIL import ...