[pytorch] タグが付いた質問
PyTorchに関する質問にこのタグを使用します。 PyTorchは、Pythonで実装されたオープンソースの機械学習ライブラリーです。Luaで実装されたTorchをベースに、Facebookの人工知能研究グループにより開発されました。
71
質問
0
票
0
回答
76
閲覧数
element 0 of tensors does not require grad and ... のデバッグ方法が知りたいです。
以下のようなエラーが出たのですがどのようにデバッグを進めればよいでしょうか?
Variable._execution_engine.run_backward(
RuntimeError: element 0 of tensors does not require grad and does not have a grad_fn
いくつか調べていくうちにrequired_value=...
0
票
0
回答
52
閲覧数
Pytorchを利用したNNモデルで中間層の値を抽出したいと考えています.
Python初学者です.Pytorchを利用したCNNモデルで中間層の値を抽出したいです.Sequential()で作成しているのですが,全結合層の値を抽出する為に,各レイヤーにアクセスしたいと考えています.見易さを考慮して,CNNにおける畳み込み層と,全結合層を分割しているのですが,この状態でアクセスするには,どのようにプログラムすればよいのでしょうか.
print()
#ネットワークの定義
...
0
票
0
回答
180
閲覧数
NameError: name 'net' is not defined
NMTの学習について、以下のコードで画像のようなエラーが出ます。
検索しても自身で解決できない状態です。
解決方法などお分かりなる方、ご回答の方よろしくお願いいたします。
net.train()
for epoch in range(20): #20エポックまで学習
loss1K = 0.0
for i in range(len(jdata)):
jinput = ...
0
票
0
回答
159
閲覧数
ptファイルからonnxファイルに変換できません!
こんにちは。Yolov5で作成した.ptファイルをOpenCVで使うために.onnxファイルに変換したいです。
import torch
# モデルを読み込む
model = torch.load('best.pt')
model.eval() # 推論モードに設定
import torch.onnx as onnx
# 入力テンソルの例を作成(...
0
票
0
回答
76
閲覧数
import torchでUnicodeDecodeErrorになります
import torchをしようとするとUnicodeDecodeErrorになります。どうすればデコードできるでしょうか?
File "/home/haga/Context-Cluster/models/context_cluster.py", line 11, in <module>
import torch
File "/home/...
0
票
0
回答
68
閲覧数
torchtext におけるapply_func.py: from torchtext.legacy.data import Batchのimportエラー
https://github.com/AntixK/PyTorch-VAE
の説明の通り
$ git clone https://github.com/AntixK/PyTorch-VAE
$ cd PyTorch-VAE
$ pip install -r requirements.txt
で、インストール。
$ cd PyTorch-VAE
$ python run.py -c configs/...
0
票
0
回答
68
閲覧数
optimizer.state_dict()で保存したオプティマイザのパラメータを使って学習の再開ができません
要旨:
学習を行う環境の制約上,学習の経過を一旦保存しそれらを読み込んで学習を再開するコードを書く必要があります.しかし,エラーが出てしまい学習が行えません.
エラー文:
Traceback (most recent call last):
File "c:/Users/.../Desktop/PINN_ACSL/NN.py", line 531, in <...
1
票
0
回答
60
閲覧数
拡散確率モデル画像合成手法の数学記号を教えてください。
ディープラーニングの画像生成で使われる拡散確率モデルは、次のサイトで解説されています。
[論文]Denoising Diffusion Probabilistic Models
https://qiita.com/ground0state/items/565de257807b12dba52a
そのサイトのしょっぱなの次の式が説明できる方教えてください。
特に、いきなり出てくる x0:T や ...
1
票
0
回答
143
閲覧数
PyTorchを使った物体検出の転移学習が動作しない
概要
PyTorchのサンプルコードを参考にした転移学習コードでtrain_one_epochが動作しません
どのようにすれば学習が進みますでしょうか?
以下追記
vscode上でスクリプトを実行すると、実行中を示すアイコンが出るだけで、学習の進捗やエラーメッセージは表示されません
一方で、処理確認のために挿入したprintメッセージが、下記に添付したengine.pyの抜粋中の"...
0
票
0
回答
172
閲覧数
Google ColaboratoryでWhisperとECAPA-TDNNを使ったWhisper speaker diarizationを導入したいがpyファイルの実行ができない
Pythonに関してはほぼ初学者です。
動画などの音声を文字起こしするアプリケーションWhisper speaker diarizationをGoogle Colaboratry上で導入したいのですが最後のpyファイルの実行だけが上手く行きません。その手前のコードまではうまく出来ています。
一番最後の行が正直なところ良く分かっていないのでご享受いただければ幸いです。
https://self-...
0
票
1
回答
207
閲覧数
pytorchでTensorで一番値が大きいインデックスの場所以外の値を0にしたい
Pytorchで3次元のtensorがあり、tensor中のdim=1の中で値が一番大きい場所を1に、一番大きい値以外を0にしたいのですがどうすればいいでしょうか?
ご教授よろしくお願いします。
torch.argmaxやtorch.max、スライス処理など色々考えてみたんですがわからなかったです。
該当のソースコード
import torch
x = torch.randn(4, 3, 1)
...
1
票
0
回答
79
閲覧数
ResNet50の転移学習にて、想定した形状のTensorが出力できない
pretrain済みのResNet50の構造を変更して利用したいのですが、
変更後のモデルから、想定していたような形状の出力が得られません。
次のコードで、
モデルの構造を変更し,torchinfoで確認すると
def Custom_ResNet50():
model=torchvision.models.resnet50(pretrained=True)
model....
0
票
0
回答
75
閲覧数
PytorchのU-NetのDeeplearningで結果を出力するときに、同じモデルと同じ画像で違う結果が出力されてしまう
Google Colaboratory のPytorchで画像データのU-Net RCNNのDeepLearningを実施しています。
事前に作った学習モデルを読み込ませてテスト画像を処理しているのですが、
学習モデルからテストファイルの解析を行う際に、読み込ませるテスト画像の組み合わせで、個々の画像の判断結果が変わってしまいます。
例えば[A、B、C]...
0
票
1
回答
198
閲覧数
jsonで FileNotFoundError: この二つの差はなんですか?
片方は読み込めるのですが、もう片方は読み込めません。この二つの違いは何でしょうか?
コード2 は https://github.com/graykode/ALBERT-Pytorch のコードを試そうとしました。
コード1 はエラーが出た部分を切り出した。
コード1 動く
import json
json.load(open('config/pretrain.json'))
print(&...
-1
票
1
回答
1,707
閲覧数
PyTorch Lightningでの学習の実行でエラーがでます
PyTorch Lightningをつかってネットワークの学習をしようとししているのですが、
# 学習の実行
trainer.fit(net, train_loader, val_loader)
を実行しようとしたところ、下記エラーがでます。
何が原因なのでしょうか?
コードファイルの添付いいたします
INFO:pytorch_lightning.callbacks.model_summary:
...
0
票
0
回答
237
閲覧数
NNを訓練する時のbatch出力にNaNが混じっている場合の対処法?(Torch or Tensorflow,Keras)
NN(Neural Network)を訓練する時に、
batch出力にNaNが混じっている場合があると気づきましたが、
optimizerのstep実行に例外が発生していません。
しかし、NaNの存在が訓練過程を不安定させたり、訓練速度や精度をダウンさせたりする事は容易に想像できますので、どう対処すれば良いのでしょうか。
0
票
1
回答
360
閲覧数
Pytorchで学習が進みません(画像の多クラス分類)
Pytorchで画像の10クラス分類を行いたく、コード自体はエラーなく実行できるのですが、何エポック繰り返しても学習が進まず、LossもAccuracyも0.000のまま変わりません。
(実行すると、100エポック回った段階でも
EPOCH: 100, Train [Loss: 0.000, Accuracy: 0.000]
と出てしまう状況です。)
...
0
票
1
回答
104
閲覧数
loss.backward() -> Missing XLA configuration
pytorch を用いて作成したモデルから計算された損失を
伝搬する際に、以下のコードを実行すると
以下のエラーメッセージが表示されて困っています。
loss.backward()
順伝搬の計算は問題なく実行できます。
terminate called after throwing an instance of 'std::runtime_error'
what(): tensorflow/...
0
票
1
回答
164
閲覧数
PyTorchでのNLP_RNNにて、CPU GPU混在エラー
PyTorchのまだ初心者ですが、NLPのシンプルなRNN構築を目指しております。
CPUでは動くのですが、デバイスをGPUにするとCPU、GPUの混在エラーが解消できません。
hidden層あたりが原因と考えてるのですが、どうやっても解消できず。
どなたか助言をいただけますと助かります。
RNNクラス
class RNN(nn.Module):
def __init__(self, ...
1
票
1
回答
177
閲覧数
PyTorchでの損失関数と最適化アルゴリズムの結びつけについて
DLの学習時には、モデルを使って予測を出す→損失関数で損失を計算→損失関数を最適化アルゴリズムに(逆伝播&パラメータ更新)という流れだと思うのですが、これをPyTorchを行う時、「この最適化アルゴリズムでこの損失関数を最適化するよ」という情報の結びつけは自動的に行われるのでしょうか?
具体的には、以下にあるように
# 正しいコード
# 交差エントロピー誤差関数
loss_fnc = nn....
0
票
1
回答
898
閲覧数
Given groups=1, weight of size [], expected input[] to have channels, but got channels insteadの解決を手伝っていただけないでしょうか?
PytorchでAIモデルを構築中です。
畳み込み層を作成中に以下のエラーメッセージが発生しました。
RuntimeError Traceback (most recent call last)
<ipython-input-42-277e33b168b8> in <module>
767
...
0
票
1
回答
114
閲覧数
浮動小数点のbool判定について
pytorchのtorch.nn.Linearモジュールをnumpyで再現しようとしています。
結果は多少誤差がでたため、小数点を切捨ててboolの判定を出力してみました。
切り捨てた結果は同じ数字にもかかわらすFalse判定になってしまうのはなぜでしょうか?
私自身コンピュータサイエンスには詳しくないため、どなたかご教授お願いします。
import numpy as np
import ...
0
票
0
回答
366
閲覧数
Pytorch でエラー TypeError: linear(): argument 'input' (position 1) must be Tensor, not int
このコードだとエラーが出てしまいます。どう改善すればいいですか?
エラーメッセージ:
TypeError: linear(): argument 'input' (position 1) must be Tensor, not int
ソースコード:
import torch
import torch.nn as nn
import torch.nn.functional as F
model =...
0
票
0
回答
389
閲覧数
ValueError: Expected input batch_size (256) to match target batch_size (16).のエラー
DeepLearningのコード(WideResNet)を実装しようと思い、自作のデータセットによる学習を試みているのですが、損失の計算時にエラーが出ます。
実装をメインとしており、自作データで学習をすることが目標で、アルゴリズムそのものの理解ができておらず、至らぬ点がありますが、ご教示ください。よろしくお願いいたします。
コメントアウトなどを削除したため、...
0
票
1
回答
257
閲覧数
jupyterLab でPILライブラリを使用した際に取り込んだ画像のインライン表示ができない。
マイナビ出版から出ている「PyTorch実践入門」を進めるにあたり下記の問題が発生しました。
本書の推奨環境はJupyterとなっている為、DockerHubから以下をpullしています。
% docker run --rm -d -v $PWD:/app -p 8888:8888 \pman0214/pytorch_jupyterlab:1.9.0
runコマンド引用サイト
M1 ...
0
票
1
回答
1,513
閲覧数
TypeError: linear(): argument 'input' (position 1) must be Tensor, not tupleをうまく解消できない
pytorchで学習したモデルの推論を行いたいです。
モデルは、入力は2つ、出力は1つです。
そのため、入力を2つ入れて推論を行おうとしましたが、うまく動きません。
どうすればうまく動かせるのですか?
x_1 = np.arange(0.49, 1+2*10**-3, 2*10**-3)
x_2 = [0.8 for i in range(len(x_1))]
...
0
票
0
回答
1,012
閲覧数
Attempting to deserialize object on a CUDA device but torch.cuda.is_available() is Falseが解消できない。
pytorchで推論をしようと保存したモデルを読み込もうとするとエラーが出てきます。
Google colabの環境下で、gpuで学習を行い、CPUしかない環境下で以下のプログラムを実行するとエラーが出てきます。
model = Model
model.load_state_dict(torch.load("185.pth"))
model.load_state_dict(...
0
票
1
回答
495
閲覧数
torch.autograd.gradが0またはNoneTypeになってしまう
以下のコード中のtorch.autograd.gradの偏微分の計算で,Noneになってしまいます.
torch.autograd.gradの中身を見ることが出来ませんので,偏微分の計算中に何かしら問題が起こっている?と思いますが,どうなっているかがいまだに不明です.
なお,torch.autograd.gradで用いられるlossとparams.values()はきちんと値が出力されます.
...
0
票
0
回答
1,746
閲覧数
torchinfo.summaryでのエラーおよび、引数のエラー
pytorchにおいてtorchsummaryでモデルの構造をファインチューニングするため、可視化するため、以下を実行しました。
print(summary(model, input_size=([(10,1684,40),(10)])))
forward関数は2入力となっているので、引数を2つ入力しています。モデルのforward関数における引数の次元数はそれぞれ3次元と1次元です。しかし、...
2
票
1
回答
3,889
閲覧数
torchvisionのimage.pydが見つからない
初めまして。ネット上で調べましたが、解決策が無くて困っています
pytorchを使いたいと思い、torchとtorchvisionをインストールしたのですが、torchvisionをインポートすると
下記Warningが発生します。
import torch
import torch.nn as nn
import torch.nn.functional as f
from torch.utils....
0
票
0
回答
274
閲覧数
GooglecolabでCycleGANを実行したのに1エポックの実行時間が長すぎます
以下のサイトに従ってGooglecolabでPytorchのCycleGANを実行したのですが1エポックに約30分も時間がかかってしまいます。このサイトでは1エポックに6分くらいかかると書いてありました。
CycleGAN で画像変換する。
ほかのサイトでも1エポックに6分当たりかかると書かれており私の実行時間よりとても短いです。なぜ私が実行すると30分もかかってしまうのかが分からず困っております。...
3
票
0
回答
142
閲覧数
複数GPU搭載のサーバ上での他のGPU上でプログラムが実行されると、CPU実行になってしまう。
4枚のGPUを積んだサーバ上で、全GPU空いている状態で私のプログラムを実行するとGPU上で実行できるのですが、GPU ID: 1〜3が使用されている状態で、GPU ID: 0で実行しようとしても、GPUが使用されず CPUでの実行になってしまいます。また、逆に私がGPU ID: 0で実行中に、GPU ID: 1〜3で実行されると、私のプログラムだけCPU実行になってしまいます。...
0
票
0
回答
1,358
閲覧数
No module named 'torch.nn'; 'torch' is not a packageのエラーを直したい
pytorchをインストールして、インストールできたことも確認したのですが、以下のエラーが発生してしまいます。どなたか解決法をご教示お願い致します。
エラーメッセージ
import torch.nn as nn
ModuleNotFoundError: No module named 'torch.nn'; 'torch' is not a packages
ソースコード
import ...
0
票
0
回答
5,698
閲覧数
AnacondaにPyTorchをインストールしたのに、実際に使おうとするとエラーが出てしまいます
私はmacを使用しています。Anacondaは前から使っていたんですが、そこにPyTorchを入れようと思い次の方法でインストールを試みました。
まず、以下のサイトの「コマンドライン環境の設定」というところに書いてある手順を踏みました。
https://www.python.jp/install/anaconda/macos/install.html
次に、以下のサイト(pytorch公式サイト)...
0
票
1
回答
516
閲覧数
PyTorchでのloss関数自作時に出力ベクトル以外の変数も使いたい
PyTorchで機械学習を行っているのですが、loss関数を自作したいと思っています。
今のところ学習用のデータx_train, x_test, y_train, y_testは作成方法として
(1) DNNへの入力データ
Data_A(サイズ[10000,200])→処理1(不可逆変換)→Data_X(サイズ[10000,200])
(2) DNNからの出力データ
Data_A(サイズ[...
1
票
0
回答
125
閲覧数
pythonの継承で使われるsuper(Conv1d, self)が分かりません。
pytorchのコードを見ていたところ、
class Conv1d(_ConvNd):
def __init__(
self,
in_channels: int,
out_channels: int,
kernel_size: _size_1_t,
stride: _size_1_t = 1,
...
0
票
1
回答
253
閲覧数
numpyからpytorchへの変換
機械学習の予測プログラムを作っているのですが,tensorflowで書いたモデルとpytorchで書いたモデルの2つを作っています.
tensorflowベースで書いた予測モデルをpytorchベースのものに変換したいのですが,うまく行かないです.どのように対処すべきでしょうか?ご教示の程,お願い致します.
処理の流れ:
10秒間データを習得し(1×8配列),リストに入れる.
その最頻値を出し,...
0
票
1
回答
226
閲覧数
pytorchでの学習したモデルの呼び出しとクラスの呼び出しの方法
pytorchでの機械学習用のコードを実装し,次に予測するコードを実装しています.
pytorchで学習したモデルを呼び出そうとしたら,モデルの呼び出しではなく,なぜか,呼び出したプログラムが開始してしまします.どなたか,正しい学習済みのモデルとクラス及び変数の呼び出し方を教えてください.2つのプログラムファイルは同じディレクトリにあり,学習プログラムはRECurrentSNN.py,...
0
票
1
回答
102
閲覧数
Logistic Regressionで実装しましたが,accuracyが20パーセント台と低いです.
Logistic Regressionによるニューラルネットを実装したのですが,その正解率が低すぎるので,直したいです.
入力xはshape(1,64)でyはラベルでshape(1,6)の配列です.バッチサイズやニューロンの数を変えたりと,ハイパラメータを変えてみたのですが,正答率が上がりませんでした.どなたか,正答率を上げるために,どのような方法がいいでしょうか,ご教示の程,...
1
票
1
回答
214
閲覧数
pytorchのoutputについて
以下のプログラムは手書き数字データセットMNISTを10クラスに識別するものです。
正解数と識別率をevaluate関数で求めているのですが、どのデータがどのクラスに分類されたかを調べるために混同行列を用いてみました。しかし、このプログラムを実行すると、ncorrectの値と混同行列の体格成分の和が一致しません。どうすれば一致するでしょうか。
学習用プログラム
import os
import ...
0
票
0
回答
3,305
閲覧数
Pythonでエラーが出てしまう: IndexError: index 100 is out of bounds for dimension 0 with size 100
下記のプログラムを実行すると、エラーメッセージが出てしまいます。
実装したいこととしては、Aを混同行列としてA[pred[i]][y[i]]に1を足しこみたいです。
エラーメッセージ:
File "cnnTm.py", line 61, in <module>
lossT, accT, ncorrectT = cnnL.evaluate(model, XT,...
0
票
1
回答
2,793
閲覧数
Expected input batch_size (1) to match target batch_size (6).のエラーを直したいです.
機械学習のコードを実装しており,LogisticRegression(nn.Module)をモデルにしています.
損失lossの計算時に配列のサイズのミスマッチに関するエラーがでます.xはshape=[1,64],yはshape=[1,6]です.
エラーに該当するfor文内はxはshape=[64],yはshape=[6]です.どなたか,このエラーの直し方をご教示下さい.よろしくお願い致します.
'...
0
票
1
回答
3,031
閲覧数
index 1 is out of bounds for dimension 0 with size 1 を直したい
ニューラルネットを作成していますが,損失関数とSGDの更新のプログラムでエラーがでます.出力yは0~5の6つのラベルがあり,それぞれ[1,0,0,0,0,0](ラベル0)のようなone-hot表現となっています.torch.Size([19573, 6])となっていることは確認済みです.
下記エラーの直し方をどなたかご教示の程,よろしくお願い致します.
エラーメッセージ
grads['dl/df']...
0
票
2
回答
1,499
閲覧数
tensor配列の要素のある場所を取得したいです.
tensor型の配列のインデックスを取得したいのですが,うまくいかず,教えて頂きたいです.以下のような形になっており,最大要素1がある場所だけを抽出したいです.
tensor([[1., 0., 0., 0., 0., 0.], →この場合は0を
[1., 0., 0., 0., 0., 0.],
[1., 0., 0., 0., 0., 0.],
...,
[0....
-2
票
1
回答
6,857
閲覧数
'int' object is not callableを直したいです.
np.ndarray型のデータをfor文に入れて,ニュラールネットを作成しているのですが,うまくいきません.どなたか,ご教示の程,よろしくお願い致します.以下にエラー文と該当箇所を記載いたします.
エラー文
2020-11-11 14:18:42.758237: I tensorflow/stream_executor/platform/default/dso_loader.cc:44] ...
0
票
1
回答
3,785
閲覧数
unexpected EOF while parsing のエラーを直したい
現在,[bindnet][1] というライブラリーを用いてRecurrent Spiking Neural netを作成しており,トレーニングデータ(npzファイル)をload(xとyの値)してシミュレーションを行いたいのですが,enumerate関数で取り出そうとすると,"unexpected EOF while parsing" というエラーが表示されます....
0
票
0
回答
1,333
閲覧数
pip install torch がエラーになる
プログラミング初心者かつ、初質問です。
Pythonでプログラムを書いたところ、import torch の行でエラーになり、pip install torch を行おうとするとエラーになります。virtualenv などのアンインストールを行いましたが治りませんでした。以下、エラー文です。
pip install torch torchvision
Defaulting to user ...
0
票
1
回答
99
閲覧数
torchにおけるサイズ[N,1]と[1,N]の掛け合わせ方
torch形式のベクトルA(サイズ[N,1])とB=A'(サイズ[1,N])を掛け合わせてサイズ[N,N]の行列を算出したいと考えています。
しかしtorch.matmulやtorch.mmではエラーが出てきてしまうか、A'A(サイズ[1,1])が出てきてしまいます。
A = [a_1, a_2, ..., a_N]'とすれば算出したい行列Cの(i,j)成分は
for i in range(N):
...
0
票
0
回答
156
閲覧数
pytorchで作ったCNNが学習しません
以下のようなCNNをpythonで作成したのですが、計算を回したところlossの値が変化しませんでした。
原因がわからないのですが、教えていただけないでしょうか?
from torch.nn import MSELoss
device = 'cuda'
model = Model().to(device)
criterion = MSELoss()
optimizer = Adam(model....
1
票
1
回答
918
閲覧数
Pytorch での予測ラベル出力時にエラー Attribute Error : Example has no attribute Label
僕は今自然言語処理の勉強をしていて、本を参考にしながらコードを書いていました。
最後の予測が本のデータだとテストデータにもラベルがついているため以下のコードで正答率が出力されますが、自分が使用しているデータはテストデータにはTEXTしかないのでこのコードのままだとエラーが出てしまいます。
いろいろコードを改変してみたりしましたがうまく動きませんでした。...