[pytorch] タグが付いた質問

PyTorchに関する質問にこのタグを使用します。 PyTorchは、Pythonで実装されたオープンソースの機械学習ライブラリーです。Luaで実装されたTorchをベースに、Facebookの人工知能研究グループにより開発されました。

43 未回答やベストアンサーなし質問
絞り込み
並べ替え
タグ付けされた
2
0 回答
120 閲覧数

複数GPU搭載のサーバ上での他のGPU上でプログラムが実行されると、CPU実行になってしまう。

4枚のGPUを積んだサーバ上で、全GPU空いている状態で私のプログラムを実行するとGPU上で実行できるのですが、GPU ID: 1〜3が使用されている状態で、GPU ID: 0で実行しようとしても、GPUが使用されず CPUでの実行になってしまいます。また、逆に私がGPU ID: 0で実行中に、GPU ID: 1〜3で実行されると、私のプログラムだけCPU実行になってしまいます。...
Santa Maria's user avatar
2
0 回答
590 閲覧数

RuntimeError: Dimension out of range (expected to be in range of [-1, 0], but got 1)と出力されます。

https://github.com/pytry3g/pytorch-example/tree/master/nlp/rnn/wikipedia 上記githubのtest_model.pyとtrain.pyを実行すると、共に、 以下のエラーが出てしまいます。 Traceback (most recent call last): File "/home/yudai/デスクトップ/...
yep's user avatar
  • 21
1
0 回答
53 閲覧数

拡散確率モデル画像合成手法の数学記号を教えてください。

ディープラーニングの画像生成で使われる拡散確率モデルは、次のサイトで解説されています。 [論文]Denoising Diffusion Probabilistic Models https://qiita.com/ground0state/items/565de257807b12dba52a そのサイトのしょっぱなの次の式が説明できる方教えてください。 特に、いきなり出てくる x0:T や ...
Good_Morning's user avatar
1
0 回答
94 閲覧数

PyTorchを使った物体検出の転移学習が動作しない

概要 PyTorchのサンプルコードを参考にした転移学習コードでtrain_one_epochが動作しません どのようにすれば学習が進みますでしょうか? 以下追記 vscode上でスクリプトを実行すると、実行中を示すアイコンが出るだけで、学習の進捗やエラーメッセージは表示されません 一方で、処理確認のために挿入したprintメッセージが、下記に添付したengine.pyの抜粋中の"...
codeZ's user avatar
  • 399
1
0 回答
50 閲覧数

ResNet50の転移学習にて、想定した形状のTensorが出力できない

pretrain済みのResNet50の構造を変更して利用したいのですが、 変更後のモデルから、想定していたような形状の出力が得られません。 次のコードで、 モデルの構造を変更し,torchinfoで確認すると def Custom_ResNet50(): model=torchvision.models.resnet50(pretrained=True) model....
SweetableCode's user avatar
1
0 回答
119 閲覧数

pythonの継承で使われるsuper(Conv1d, self)が分かりません。

pytorchのコードを見ていたところ、 class Conv1d(_ConvNd): def __init__( self, in_channels: int, out_channels: int, kernel_size: _size_1_t, stride: _size_1_t = 1, ...
18aaa's user avatar
  • 101
1
1 回答
170 閲覧数

pytorchのoutputについて

以下のプログラムは手書き数字データセットMNISTを10クラスに識別するものです。 正解数と識別率をevaluate関数で求めているのですが、どのデータがどのクラスに分類されたかを調べるために混同行列を用いてみました。しかし、このプログラムを実行すると、ncorrectの値と混同行列の体格成分の和が一致しません。どうすれば一致するでしょうか。 学習用プログラム import os import ...
Takuya's user avatar
  • 11
1
0 回答
1,602 閲覧数

PytorchでのTransformerの実装に関して

こんにちは TransformerをPytorchを利用して実装しようとしているのですが、 おもったような結果になりません。 以下が、訓練のコード、モデル定義のコード、データローダと出力結果のファイルです。 訓練のコード Train.py from transformer import EncoderDecoder, Encoder, LayerNorm, EncoderLayer, ...
おひや's user avatar
0
0 回答
52 閲覧数

torchtext におけるapply_func.py: from torchtext.legacy.data import Batchのimportエラー

https://github.com/AntixK/PyTorch-VAE の説明の通り $ git clone https://github.com/AntixK/PyTorch-VAE $ cd PyTorch-VAE $ pip install -r requirements.txt で、インストール。 $ cd PyTorch-VAE $ python run.py -c configs/...
user57796's user avatar
0
0 回答
39 閲覧数

optimizer.state_dict()で保存したオプティマイザのパラメータを使って学習の再開ができません

要旨: 学習を行う環境の制約上,学習の経過を一旦保存しそれらを読み込んで学習を再開するコードを書く必要があります.しかし,エラーが出てしまい学習が行えません. エラー文: Traceback (most recent call last): File "c:/Users/.../Desktop/PINN_ACSL/NN.py", line 531, in <...
Kota Takano's user avatar
0
0 回答
116 閲覧数

Google ColaboratoryでWhisperとECAPA-TDNNを使ったWhisper speaker diarizationを導入したいがpyファイルの実行ができない

Pythonに関してはほぼ初学者です。 動画などの音声を文字起こしするアプリケーションWhisper speaker diarizationをGoogle Colaboratry上で導入したいのですが最後のpyファイルの実行だけが上手く行きません。その手前のコードまではうまく出来ています。 一番最後の行が正直なところ良く分かっていないのでご享受いただければ幸いです。 https://self-...
hiroror's user avatar
0
0 回答
67 閲覧数

PytorchのU-NetのDeeplearningで結果を出力するときに、同じモデルと同じ画像で違う結果が出力されてしまう

Google Colaboratory のPytorchで画像データのU-Net RCNNのDeepLearningを実施しています。 事前に作った学習モデルを読み込ませてテスト画像を処理しているのですが、 学習モデルからテストファイルの解析を行う際に、読み込ませるテスト画像の組み合わせで、個々の画像の判断結果が変わってしまいます。 例えば[A、B、C]...
t3468's user avatar
  • 1
0
0 回答
143 閲覧数

NNを訓練する時のbatch出力にNaNが混じっている場合の対処法?(Torch or Tensorflow,Keras)

NN(Neural Network)を訓練する時に、 batch出力にNaNが混じっている場合があると気づきましたが、 optimizerのstep実行に例外が発生していません。 しかし、NaNの存在が訓練過程を不安定させたり、訓練速度や精度をダウンさせたりする事は容易に想像できますので、どう対処すれば良いのでしょうか。
best medicine's user avatar
0
1 回答
200 閲覧数

Pytorchで学習が進みません(画像の多クラス分類)

Pytorchで画像の10クラス分類を行いたく、コード自体はエラーなく実行できるのですが、何エポック繰り返しても学習が進まず、LossもAccuracyも0.000のまま変わりません。 (実行すると、100エポック回った段階でも EPOCH: 100, Train [Loss: 0.000, Accuracy: 0.000] と出てしまう状況です。) ...
sasakey's user avatar
0
1 回答
79 閲覧数

loss.backward() -> Missing XLA configuration

pytorch を用いて作成したモデルから計算された損失を 伝搬する際に、以下のコードを実行すると 以下のエラーメッセージが表示されて困っています。 loss.backward() 順伝搬の計算は問題なく実行できます。 terminate called after throwing an instance of 'std::runtime_error' what(): tensorflow/...
harotaroro's user avatar
0
0 回答
171 閲覧数

Ray tuneでのGPU の使い方を教えてほしいです。

Ray tune上でGPUを用いてハイパーパラメータ最適化を試みましたが、以下のようなエラーに頭を抱えています。 RuntimeError: No CUDA GPUs are available (main pid=4099) *** SIGSEGV received at time=1664685800 on cpu 0 *** (main pid=4099) PC: @ ...
Semayuki's user avatar
0
0 回答
78 閲覧数

ディープラーニングでの検証データの使いみち

機械学習・深層学習を勉強していると、データを「訓練データ」「検証データ」「テストデータ」に分けることが大事だというのを見かけます。 それぞれ「訓練データ」は学習を行うデータ、「検証データ」はSVMのカーネル関数の定数などのハイパーパラメータを決めるためのデータ、「テストデータ」が学習後のモデルを評価するためのデータ、という役割を持ちますが、ディープラーニングの実装(PyTorch)...
tedmosby's user avatar
0
0 回答
81 閲覧数

PytorchとPythonの数の扱いの違いについて

こんにちは, 研究で深層学習をやっているものです.早速なのですが,PytorchとPythonは数を異なった扱いで処理しているのでしょうか?(例えばfloat32, double64など) というのも,例えば非常に簡単なニューラルネット(ボールの重さmと発射角度theta,速度vを与えると落ちる位置を予測する)をPythonの自作のコードで定義した時と,...
SpaceTAKA's user avatar
  • 267
0
1 回答
654 閲覧数

Given groups=1, weight of size [], expected input[] to have channels, but got channels insteadの解決を手伝っていただけないでしょうか?

PytorchでAIモデルを構築中です。 畳み込み層を作成中に以下のエラーメッセージが発生しました。 RuntimeError Traceback (most recent call last) <ipython-input-42-277e33b168b8> in <module> 767 ...
Semayuki's user avatar
0
1 回答
97 閲覧数

浮動小数点のbool判定について

pytorchのtorch.nn.Linearモジュールをnumpyで再現しようとしています。 結果は多少誤差がでたため、小数点を切捨ててboolの判定を出力してみました。 切り捨てた結果は同じ数字にもかかわらすFalse判定になってしまうのはなぜでしょうか? 私自身コンピュータサイエンスには詳しくないため、どなたかご教授お願いします。 import numpy as np import ...
lino_ver2's user avatar
0
0 回答
212 閲覧数

Pytorchで自作モデルを使うと動作が非常に遅くなる気がします。理由がわかる方はいらっしゃいますでしょうか。

初めまして。 現在pytorchを使って機械学習を行っているのですが、自作モデルを使った際に非常に速度が遅くなるのが気になっています。具体的な事例として、peephole connectionを付け足したLSTMを動かしてみたのですが、通常のpytorch.nn.LSTMが1エポック14秒で学習できるのに対し、自作した方だと10分もかかりました。 ...
Wahhoi22's user avatar
0
0 回答
278 閲覧数

Pytorch でエラー TypeError: linear(): argument 'input' (position 1) must be Tensor, not int

このコードだとエラーが出てしまいます。どう改善すればいいですか? エラーメッセージ: TypeError: linear(): argument 'input' (position 1) must be Tensor, not int ソースコード: import torch import torch.nn as nn import torch.nn.functional as F model =...
KSW's user avatar
  • 1
0
0 回答
284 閲覧数

ValueError: Expected input batch_size (256) to match target batch_size (16).のエラー

DeepLearningのコード(WideResNet)を実装しようと思い、自作のデータセットによる学習を試みているのですが、損失の計算時にエラーが出ます。 実装をメインとしており、自作データで学習をすることが目標で、アルゴリズムそのものの理解ができておらず、至らぬ点がありますが、ご教示ください。よろしくお願いいたします。 コメントアウトなどを削除したため、...
user53193's user avatar
0
1 回答
179 閲覧数

jupyterLab でPILライブラリを使用した際に取り込んだ画像のインライン表示ができない。

マイナビ出版から出ている「PyTorch実践入門」を進めるにあたり下記の問題が発生しました。 本書の推奨環境はJupyterとなっている為、DockerHubから以下をpullしています。 % docker run --rm -d -v $PWD:/app -p 8888:8888 \pman0214/pytorch_jupyterlab:1.9.0 runコマンド引用サイト M1 ...
RORORO's user avatar
  • 1
0
1 回答
1,212 閲覧数

TypeError: linear(): argument 'input' (position 1) must be Tensor, not tupleをうまく解消できない

pytorchで学習したモデルの推論を行いたいです。 モデルは、入力は2つ、出力は1つです。 そのため、入力を2つ入れて推論を行おうとしましたが、うまく動きません。 どうすればうまく動かせるのですか? x_1 = np.arange(0.49, 1+2*10**-3, 2*10**-3) x_2 = [0.8 for i in range(len(x_1))] ...
18aaa's user avatar
  • 101
0
0 回答
914 閲覧数

Attempting to deserialize object on a CUDA device but torch.cuda.is_available() is Falseが解消できない。

pytorchで推論をしようと保存したモデルを読み込もうとするとエラーが出てきます。 Google colabの環境下で、gpuで学習を行い、CPUしかない環境下で以下のプログラムを実行するとエラーが出てきます。 model = Model model.load_state_dict(torch.load("185.pth")) model.load_state_dict(...
18aaa's user avatar
  • 101
0
0 回答
1,339 閲覧数

torchinfo.summaryでのエラーおよび、引数のエラー

pytorchにおいてtorchsummaryでモデルの構造をファインチューニングするため、可視化するため、以下を実行しました。 print(summary(model, input_size=([(10,1684,40),(10)]))) forward関数は2入力となっているので、引数を2つ入力しています。モデルのforward関数における引数の次元数はそれぞれ3次元と1次元です。しかし、...
noname's user avatar
  • 1
0
0 回答
218 閲覧数

GooglecolabでCycleGANを実行したのに1エポックの実行時間が長すぎます

以下のサイトに従ってGooglecolabでPytorchのCycleGANを実行したのですが1エポックに約30分も時間がかかってしまいます。このサイトでは1エポックに6分くらいかかると書いてありました。 CycleGAN で画像変換する。 ほかのサイトでも1エポックに6分当たりかかると書かれており私の実行時間よりとても短いです。なぜ私が実行すると30分もかかってしまうのかが分からず困っております。...
naruto's user avatar
  • 1
0
0 回答
1,089 閲覧数

No module named 'torch.nn'; 'torch' is not a packageのエラーを直したい

pytorchをインストールして、インストールできたことも確認したのですが、以下のエラーが発生してしまいます。どなたか解決法をご教示お願い致します。 エラーメッセージ import torch.nn as nn ModuleNotFoundError: No module named 'torch.nn'; 'torch' is not a packages ソースコード import ...
tazawa's user avatar
  • 1
0
0 回答
1,136 閲覧数

YOLOv5でオブジェクトの特徴量を取得したい

こんにちは。学習済みモデルを使用したYOLOv5でオブジェクトの特徴量を取得したいです。オープンソースの「detect.py」から取得できるのではないかと考えているのですが、該当部分まで推測できていません。推論に使用されるオブジェクトの特徴値を取得するにはどうすればよいのでしょうか?ご教授いただけますと幸いです。以下「detect.py」のコードです。 Usage: $ python ...
臼木瑠音's user avatar
0
0 回答
5,222 閲覧数

AnacondaにPyTorchをインストールしたのに、実際に使おうとするとエラーが出てしまいます

私はmacを使用しています。Anacondaは前から使っていたんですが、そこにPyTorchを入れようと思い次の方法でインストールを試みました。 まず、以下のサイトの「コマンドライン環境の設定」というところに書いてある手順を踏みました。 https://www.python.jp/install/anaconda/macos/install.html 次に、以下のサイト(pytorch公式サイト)...
maruko's user avatar
  • 11
0
1 回答
226 閲覧数

numpyからpytorchへの変換

機械学習の予測プログラムを作っているのですが,tensorflowで書いたモデルとpytorchで書いたモデルの2つを作っています. tensorflowベースで書いた予測モデルをpytorchベースのものに変換したいのですが,うまく行かないです.どのように対処すべきでしょうか?ご教示の程,お願い致します. 処理の流れ: 10秒間データを習得し(1×8配列),リストに入れる. その最頻値を出し,...
tazawa's user avatar
  • 1
0
1 回答
210 閲覧数

pytorchでの学習したモデルの呼び出しとクラスの呼び出しの方法

pytorchでの機械学習用のコードを実装し,次に予測するコードを実装しています. pytorchで学習したモデルを呼び出そうとしたら,モデルの呼び出しではなく,なぜか,呼び出したプログラムが開始してしまします.どなたか,正しい学習済みのモデルとクラス及び変数の呼び出し方を教えてください.2つのプログラムファイルは同じディレクトリにあり,学習プログラムはRECurrentSNN.py,...
tazawa's user avatar
  • 1
0
1 回答
101 閲覧数

Logistic Regressionで実装しましたが,accuracyが20パーセント台と低いです.

Logistic Regressionによるニューラルネットを実装したのですが,その正解率が低すぎるので,直したいです. 入力xはshape(1,64)でyはラベルでshape(1,6)の配列です.バッチサイズやニューロンの数を変えたりと,ハイパラメータを変えてみたのですが,正答率が上がりませんでした.どなたか,正答率を上げるために,どのような方法がいいでしょうか,ご教示の程,...
tazawa's user avatar
  • 1
0
0 回答
2,607 閲覧数

Pythonでエラーが出てしまう: IndexError: index 100 is out of bounds for dimension 0 with size 100

下記のプログラムを実行すると、エラーメッセージが出てしまいます。 実装したいこととしては、Aを混同行列としてA[pred[i]][y[i]]に1を足しこみたいです。 エラーメッセージ: File "cnnTm.py", line 61, in <module> lossT, accT, ncorrectT = cnnL.evaluate(model, XT,...
Takuya's user avatar
  • 11
0
0 回答
1,243 閲覧数

pip install torch がエラーになる

プログラミング初心者かつ、初質問です。 Pythonでプログラムを書いたところ、import torch の行でエラーになり、pip install torch を行おうとするとエラーになります。virtualenv などのアンインストールを行いましたが治りませんでした。以下、エラー文です。 pip install torch torchvision Defaulting to user ...
T.F's user avatar
  • 1
0
0 回答
147 閲覧数

pytorchで作ったCNNが学習しません

以下のようなCNNをpythonで作成したのですが、計算を回したところlossの値が変化しませんでした。 原因がわからないのですが、教えていただけないでしょうか? from torch.nn import MSELoss device = 'cuda' model = Model().to(device) criterion = MSELoss() optimizer = Adam(model....
guch's user avatar
  • 1
0
2 回答
656 閲覧数

PyTorch で二つのコードの差は何ですか?どうして片方だけエラーが出るのかわかる人教えてください

この二つのコードの差は何ですか?どうして片方だけエラーが出るのかわかる人教えてください 両方 torch.Tensor 型同士の足し算なのに、なぜ片方だけエラーが出るのですか? わかる人教えてください。 コードA a=torch.tensor([[10]]).to("cuda:0").half() b=torch.tensor([2]).to("cuda:0"...
 flan's user avatar
0
1 回答
344 閲覧数

torchtext.data.Iteratorでdataloaderを作成すると、結果が転値(Transpose)されてしまう

手元のCSVファイル(テキスト, ラベル)をtorchtextで読み込んでdataloaderにしたいのですが、結果が転置されてしまいます。 train_loaderのshapeは(Batch_size, vocabrary_size)となるかと思うのですが、(vocabrary_size, Batch_size)となってしまいます。 どなたか原因を指摘頂けないでしょうか。 # フィールド定義 ...
TBan's user avatar
  • 11
0
1 回答
201 閲覧数

PyTorchで行列計算

PyTorchを使って、深層学習をしています。 forward計算内でnumpyのnp.tileやnp.reshapeなどを使っているのですが、Tensor型をnumpyのndarray型に変換してしまうと、requires_gradの情報が失われ、学習ができません。 Tensor型のままtileのような処理を実行する方法はありますでしょうか。 もしくは、...
ほわwhitearth-'s user avatar
0
0 回答
348 閲覧数

pytorchのcuda10.0がインストールできない。公式サイト指定のコマンドで実行してもcuda9.0用がはいる

私の環境は ubuntu18.04 cuda 10.0 です。 そこで、pytorch公式サイトでインストールを試みたところ pip3 install https://download.pytorch.org/whl/cu100/torch-1.1.0-cp36-cp36m-linux_x86_64.whl でうまく入りませんでした。 torchvisonはcuda10.0のものが入りました。...
musako's user avatar
  • 163
0
0 回答
206 閲覧数

pytrorchをターミナルでインストールしたが、入っていない

問題点 TerminalでPytorchをinstallしたが、pip freezeで確認したところ表示されておらず、インストールしたい 使用PCはmacOS Mojave, MacBookPro ターミナルでPytorchをinstallしたコードと結果 (tf16cpu) bash-3.2$ conda install pytorch torchvision -c pytorch ...
Kenza's user avatar
  • 1
0
0 回答
1,091 閲覧数

cx_Freezeでexe化したPytorchを使用したpythonスクリプトのエラーについて

初めまして。とても困っているので誰か助けてください。 pytorchを使用したpythonプログラム(test2.pyとする)をcx_Freezeでexe化して、生成されたexeファイルを実行したところ、 "c:\~~~\torch\__init__.py",line 102, in<module> from torch._C import * importError:DLL ...
aki111's user avatar
  • 1