[pytorch] タグが付いた質問
PyTorchに関する質問にこのタグを使用します。 PyTorchは、Pythonで実装されたオープンソースの機械学習ライブラリーです。Luaで実装されたTorchをベースに、Facebookの人工知能研究グループにより開発されました。
70
件の質問
0
票
0
回答
57
閲覧数
google colaboratoryにおけるcudaのバージョン変更
google colaboratoryでcuda11.4とcuDNN8.2を使いたいです。ですが、!nvcc --versionを実行すると、
nvcc: NVIDIA (R) Cuda compiler driver
Copyright (c) 2005-2020 NVIDIA Corporation
Built on Mon_Nov_30_19:15:...
0
票
0
回答
126
閲覧数
PyTorch Lightningでforward関数に引数が正しく渡されないエラーについて
本質問は以下のサイトでも質問しています:
https://teratail.com/questions/ginz4nnicg10c9
pytorch_lightningを使用していて,以下のエラーが出ています:
TypeError: forward() missing 1 required positional argument: 'masks'.
しかし,...
0
票
1
回答
98
閲覧数
pytorch-lightningで,スカラーのテンソルにtensor.item()としているにもかかわらず同様にせよとのエラーが出る
pytorch-lightningを使用していて,以下のエラーが出ています.:
IndexError: invalid index of a 0-dim tensor. Use tensor.item() in Python or tensor.item<T>() in C++ to convert a 0-dim tensor to a number Output is ...
0
票
2
回答
877
閲覧数
PyTorch で二つのコードの差は何ですか?どうして片方だけエラーが出るのかわかる人教えてください
この二つのコードの差は何ですか?どうして片方だけエラーが出るのかわかる人教えてください
両方 torch.Tensor 型同士の足し算なのに、なぜ片方だけエラーが出るのですか?
わかる人教えてください。
コードA
a=torch.tensor([[10]]).to("cuda:0").half()
b=torch.tensor([2]).to("cuda:0"...
0
票
0
回答
89
閲覧数
Self-Attentionのヒートマップが上手く出力されない
実現したいこととして、Self-Attentionから得られた重みであるAttention Weightの可視化結果を正しく出力したい。
入力は動画データをI3Dに適用した特徴マップの0次元目にバッチサイズ30を設定したもの(30, 64, 1024)で、1次元目はフレーム数、2次元目は次元の大きさです。
正常映像と異常映像を同時入力するため、フレーム数の次元はtorch.catで結合しています。
...
0
票
1
回答
1,928
閲覧数
TypeError: linear(): argument 'input' (position 1) must be Tensor, not tupleをうまく解消できない
pytorchで学習したモデルの推論を行いたいです。
モデルは、入力は2つ、出力は1つです。
そのため、入力を2つ入れて推論を行おうとしましたが、うまく動きません。
どうすればうまく動かせるのですか?
x_1 = np.arange(0.49, 1+2*10**-3, 2*10**-3)
x_2 = [0.8 for i in range(len(x_1))]
...
0
票
1
回答
1,187
閲覧数
Given groups=1, weight of size [], expected input[] to have channels, but got channels insteadの解決を手伝っていただけないでしょうか?
PytorchでAIモデルを構築中です。
畳み込み層を作成中に以下のエラーメッセージが発生しました。
RuntimeError Traceback (most recent call last)
<ipython-input-42-277e33b168b8> in <module>
767
...
0
票
0
回答
298
閲覧数
C++版OpenCVのblobFromImageで出力した画像をネットワークに入力すると例外が発生する
概要
学習済みのyolov8ネットワークにblobFromImageで作成した画像を入力すると、例外が発生してしまい結果を取得できません。
正しく推論結果を得るにはどうすればよいでしょうか?
背景
pythonで学習したyolov8モデルをC++で使用するため、公式リポジトリにあるサンプルコードを一部修正してビルドしました。
ビルドには成功しましたが、...
0
票
0
回答
384
閲覧数
element 0 of tensors does not require grad and ... のデバッグ方法が知りたいです。
以下のようなエラーが出たのですがどのようにデバッグを進めればよいでしょうか?
Variable._execution_engine.run_backward(
RuntimeError: element 0 of tensors does not require grad and does not have a grad_fn
いくつか調べていくうちにrequired_value=...
0
票
0
回答
102
閲覧数
Pytorchを利用したNNモデルで中間層の値を抽出したいと考えています.
Python初学者です.Pytorchを利用したCNNモデルで中間層の値を抽出したいです.Sequential()で作成しているのですが,全結合層の値を抽出する為に,各レイヤーにアクセスしたいと考えています.見易さを考慮して,CNNにおける畳み込み層と,全結合層を分割しているのですが,この状態でアクセスするには,どのようにプログラムすればよいのでしょうか.
print()
#ネットワークの定義
...
0
票
0
回答
330
閲覧数
NameError: name 'net' is not defined
NMTの学習について、以下のコードで画像のようなエラーが出ます。
検索しても自身で解決できない状態です。
解決方法などお分かりなる方、ご回答の方よろしくお願いいたします。
net.train()
for epoch in range(20): #20エポックまで学習
loss1K = 0.0
for i in range(len(jdata)):
jinput = ...
1
票
1
回答
2,225
閲覧数
PyTorchでCUDAが使えない
PyTorchでCUDAを使って計算しようとしたところ、下記エラーが吐かれてしまいました。
RuntimeError: Expected object of backend CPU but got backend CUDA for argument #4 'mat1'
このエラーの対処方法をご教授していただけないでしょうか。
コードは下記の通りで、...
1
票
2
回答
1,345
閲覧数
pytorchでdeep learningの画像分類モデルを作成しています。
モデルのloss関数の一部にtorch.sqrt()をしようしたところ、backward時にnanが発生する問題に突き当たりました。
torch.sqrt()に入力されるベクトルの要素の大きさがとても小さいことが原因のようです。
torch.sqrt()のinputが小さいとbackward時に1/(2*torch.sqrt())がinfになるようです...
...
1
票
0
回答
74
閲覧数
拡散確率モデル画像合成手法の数学記号を教えてください。
ディープラーニングの画像生成で使われる拡散確率モデルは、次のサイトで解説されています。
[論文]Denoising Diffusion Probabilistic Models
https://qiita.com/ground0state/items/565de257807b12dba52a
そのサイトのしょっぱなの次の式が説明できる方教えてください。
特に、いきなり出てくる x0:T や ...
1
票
0
回答
220
閲覧数
PyTorchを使った物体検出の転移学習が動作しない
概要
PyTorchのサンプルコードを参考にした転移学習コードでtrain_one_epochが動作しません
どのようにすれば学習が進みますでしょうか?
以下追記
vscode上でスクリプトを実行すると、実行中を示すアイコンが出るだけで、学習の進捗やエラーメッセージは表示されません
一方で、処理確認のために挿入したprintメッセージが、下記に添付したengine.pyの抜粋中の"...
0
票
1
回答
354
閲覧数
pytorchでTensorで一番値が大きいインデックスの場所以外の値を0にしたい
Pytorchで3次元のtensorがあり、tensor中のdim=1の中で値が一番大きい場所を1に、一番大きい値以外を0にしたいのですがどうすればいいでしょうか?
ご教授よろしくお願いします。
torch.argmaxやtorch.max、スライス処理など色々考えてみたんですがわからなかったです。
該当のソースコード
import torch
x = torch.randn(4, 3, 1)
...
1
票
0
回答
106
閲覧数
ResNet50の転移学習にて、想定した形状のTensorが出力できない
pretrain済みのResNet50の構造を変更して利用したいのですが、
変更後のモデルから、想定していたような形状の出力が得られません。
次のコードで、
モデルの構造を変更し,torchinfoで確認すると
def Custom_ResNet50():
model=torchvision.models.resnet50(pretrained=True)
model....
-1
票
1
回答
2,445
閲覧数
PyTorch Lightningでの学習の実行でエラーがでます
PyTorch Lightningをつかってネットワークの学習をしようとししているのですが、
# 学習の実行
trainer.fit(net, train_loader, val_loader)
を実行しようとしたところ、下記エラーがでます。
何が原因なのでしょうか?
コードファイルの添付いいたします
INFO:pytorch_lightning.callbacks.model_summary:
...
0
票
1
回答
413
閲覧数
PyTorchでのNLP_RNNにて、CPU GPU混在エラー
PyTorchのまだ初心者ですが、NLPのシンプルなRNN構築を目指しております。
CPUでは動くのですが、デバイスをGPUにするとCPU、GPUの混在エラーが解消できません。
hidden層あたりが原因と考えてるのですが、どうやっても解消できず。
どなたか助言をいただけますと助かります。
RNNクラス
class RNN(nn.Module):
def __init__(self, ...
0
票
1
回答
374
閲覧数
jsonで FileNotFoundError: この二つの差はなんですか?
片方は読み込めるのですが、もう片方は読み込めません。この二つの違いは何でしょうか?
コード2 は https://github.com/graykode/ALBERT-Pytorch のコードを試そうとしました。
コード1 はエラーが出た部分を切り出した。
コード1 動く
import json
json.load(open('config/pretrain.json'))
print(&...
0
票
1
回答
545
閲覧数
Pytorchで学習が進みません(画像の多クラス分類)
Pytorchで画像の10クラス分類を行いたく、コード自体はエラーなく実行できるのですが、何エポック繰り返しても学習が進まず、LossもAccuracyも0.000のまま変わりません。
(実行すると、100エポック回った段階でも
EPOCH: 100, Train [Loss: 0.000, Accuracy: 0.000]
と出てしまう状況です。)
...
0
票
0
回答
350
閲覧数
NNを訓練する時のbatch出力にNaNが混じっている場合の対処法?(Torch or Tensorflow,Keras)
NN(Neural Network)を訓練する時に、
batch出力にNaNが混じっている場合があると気づきましたが、
optimizerのstep実行に例外が発生していません。
しかし、NaNの存在が訓練過程を不安定させたり、訓練速度や精度をダウンさせたりする事は容易に想像できますので、どう対処すれば良いのでしょうか。
0
票
1
回答
131
閲覧数
loss.backward() -> Missing XLA configuration
pytorch を用いて作成したモデルから計算された損失を
伝搬する際に、以下のコードを実行すると
以下のエラーメッセージが表示されて困っています。
loss.backward()
順伝搬の計算は問題なく実行できます。
terminate called after throwing an instance of 'std::runtime_error'
what(): tensorflow/...
1
票
1
回答
220
閲覧数
PyTorchでの損失関数と最適化アルゴリズムの結びつけについて
DLの学習時には、モデルを使って予測を出す→損失関数で損失を計算→損失関数を最適化アルゴリズムに(逆伝播&パラメータ更新)という流れだと思うのですが、これをPyTorchを行う時、「この最適化アルゴリズムでこの損失関数を最適化するよ」という情報の結びつけは自動的に行われるのでしょうか?
具体的には、以下にあるように
# 正しいコード
# 交差エントロピー誤差関数
loss_fnc = nn....
0
票
1
回答
129
閲覧数
浮動小数点のbool判定について
pytorchのtorch.nn.Linearモジュールをnumpyで再現しようとしています。
結果は多少誤差がでたため、小数点を切捨ててboolの判定を出力してみました。
切り捨てた結果は同じ数字にもかかわらすFalse判定になってしまうのはなぜでしょうか?
私自身コンピュータサイエンスには詳しくないため、どなたかご教授お願いします。
import numpy as np
import ...
0
票
2
回答
1,718
閲覧数
tensor配列の要素のある場所を取得したいです.
tensor型の配列のインデックスを取得したいのですが,うまくいかず,教えて頂きたいです.以下のような形になっており,最大要素1がある場所だけを抽出したいです.
tensor([[1., 0., 0., 0., 0., 0.], →この場合は0を
[1., 0., 0., 0., 0., 0.],
[1., 0., 0., 0., 0., 0.],
...,
[0....
1
票
1
回答
960
閲覧数
Pytorch での予測ラベル出力時にエラー Attribute Error : Example has no attribute Label
僕は今自然言語処理の勉強をしていて、本を参考にしながらコードを書いていました。
最後の予測が本のデータだとテストデータにもラベルがついているため以下のコードで正答率が出力されますが、自分が使用しているデータはテストデータにはTEXTしかないのでこのコードのままだとエラーが出てしまいます。
いろいろコードを改変してみたりしましたがうまく動きませんでした。...
1
票
1
回答
612
閲覧数
PytorchでSeq2seqを設計したが、同じ単語ばかり出力される
PytorchでSeq2seqを使って文章の校正を行おうとしたのですが、
Decoderから同じ単語しか出力されません。
main.pyです。
これを実行すると訓練などもろもろを実行します。
#main.py
import copy
import torch
import torch.nn as nn
import torch.nn.functional as F
from torch....
0
票
0
回答
518
閲覧数
Pytorch でエラー TypeError: linear(): argument 'input' (position 1) must be Tensor, not int
このコードだとエラーが出てしまいます。どう改善すればいいですか?
エラーメッセージ:
TypeError: linear(): argument 'input' (position 1) must be Tensor, not int
ソースコード:
import torch
import torch.nn as nn
import torch.nn.functional as F
model =...
0
票
1
回答
3,482
閲覧数
index 1 is out of bounds for dimension 0 with size 1 を直したい
ニューラルネットを作成していますが,損失関数とSGDの更新のプログラムでエラーがでます.出力yは0~5の6つのラベルがあり,それぞれ[1,0,0,0,0,0](ラベル0)のようなone-hot表現となっています.torch.Size([19573, 6])となっていることは確認済みです.
下記エラーの直し方をどなたかご教示の程,よろしくお願い致します.
エラーメッセージ
grads['dl/df']...
0
票
0
回答
541
閲覧数
ValueError: Expected input batch_size (256) to match target batch_size (16).のエラー
DeepLearningのコード(WideResNet)を実装しようと思い、自作のデータセットによる学習を試みているのですが、損失の計算時にエラーが出ます。
実装をメインとしており、自作データで学習をすることが目標で、アルゴリズムそのものの理解ができておらず、至らぬ点がありますが、ご教示ください。よろしくお願いいたします。
コメントアウトなどを削除したため、...
0
票
1
回答
370
閲覧数
jupyterLab でPILライブラリを使用した際に取り込んだ画像のインライン表示ができない。
マイナビ出版から出ている「PyTorch実践入門」を進めるにあたり下記の問題が発生しました。
本書の推奨環境はJupyterとなっている為、DockerHubから以下をpullしています。
% docker run --rm -d -v $PWD:/app -p 8888:8888 \pman0214/pytorch_jupyterlab:1.9.0
runコマンド引用サイト
M1 ...
0
票
1
回答
3,091
閲覧数
PyTorchのBidirectional LSTMにcudnnを導入するとRuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILEDを出す
実行環境
OS:windows10
python:3.7.4
numpy:1.16.5
pytorch:1.3.1
gpu:GeForce GTX 1060
Nvidia driver:441.87
Cuda:10.1
Cudnn:7.6.5
実行コードに関しましては頂いたものなので詳しくは省かせて頂きますが、Bidirectional LSTMを実装しています。
エラーメッセージ
...
0
票
0
回答
1,095
閲覧数
Attempting to deserialize object on a CUDA device but torch.cuda.is_available() is Falseが解消できない。
pytorchで推論をしようと保存したモデルを読み込もうとするとエラーが出てきます。
Google colabの環境下で、gpuで学習を行い、CPUしかない環境下で以下のプログラムを実行するとエラーが出てきます。
model = Model
model.load_state_dict(torch.load("185.pth"))
model.load_state_dict(...
0
票
1
回答
3,285
閲覧数
Expected input batch_size (1) to match target batch_size (6).のエラーを直したいです.
機械学習のコードを実装しており,LogisticRegression(nn.Module)をモデルにしています.
損失lossの計算時に配列のサイズのミスマッチに関するエラーがでます.xはshape=[1,64],yはshape=[1,6]です.
エラーに該当するfor文内はxはshape=[64],yはshape=[6]です.どなたか,このエラーの直し方をご教示下さい.よろしくお願い致します.
'...
0
票
1
回答
651
閲覧数
torch.autograd.gradが0またはNoneTypeになってしまう
以下のコード中のtorch.autograd.gradの偏微分の計算で,Noneになってしまいます.
torch.autograd.gradの中身を見ることが出来ませんので,偏微分の計算中に何かしら問題が起こっている?と思いますが,どうなっているかがいまだに不明です.
なお,torch.autograd.gradで用いられるlossとparams.values()はきちんと値が出力されます.
...
4
票
2
回答
1,910
閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
0
票
0
回答
2,057
閲覧数
torchinfo.summaryでのエラーおよび、引数のエラー
pytorchにおいてtorchsummaryでモデルの構造をファインチューニングするため、可視化するため、以下を実行しました。
print(summary(model, input_size=([(10,1684,40),(10)])))
forward関数は2入力となっているので、引数を2つ入力しています。モデルのforward関数における引数の次元数はそれぞれ3次元と1次元です。しかし、...
2
票
1
回答
4,422
閲覧数
torchvisionのimage.pydが見つからない
初めまして。ネット上で調べましたが、解決策が無くて困っています
pytorchを使いたいと思い、torchとtorchvisionをインストールしたのですが、torchvisionをインポートすると
下記Warningが発生します。
import torch
import torch.nn as nn
import torch.nn.functional as f
from torch.utils....
0
票
0
回答
336
閲覧数
GooglecolabでCycleGANを実行したのに1エポックの実行時間が長すぎます
以下のサイトに従ってGooglecolabでPytorchのCycleGANを実行したのですが1エポックに約30分も時間がかかってしまいます。このサイトでは1エポックに6分くらいかかると書いてありました。
CycleGAN で画像変換する。
ほかのサイトでも1エポックに6分当たりかかると書かれており私の実行時間よりとても短いです。なぜ私が実行すると30分もかかってしまうのかが分からず困っております。...
3
票
0
回答
199
閲覧数
複数GPU搭載のサーバ上での他のGPU上でプログラムが実行されると、CPU実行になってしまう。
4枚のGPUを積んだサーバ上で、全GPU空いている状態で私のプログラムを実行するとGPU上で実行できるのですが、GPU ID: 1〜3が使用されている状態で、GPU ID: 0で実行しようとしても、GPUが使用されず CPUでの実行になってしまいます。また、逆に私がGPU ID: 0で実行中に、GPU ID: 1〜3で実行されると、私のプログラムだけCPU実行になってしまいます。...
0
票
0
回答
1,742
閲覧数
No module named 'torch.nn'; 'torch' is not a packageのエラーを直したい
pytorchをインストールして、インストールできたことも確認したのですが、以下のエラーが発生してしまいます。どなたか解決法をご教示お願い致します。
エラーメッセージ
import torch.nn as nn
ModuleNotFoundError: No module named 'torch.nn'; 'torch' is not a packages
ソースコード
import ...
0
票
0
回答
6,231
閲覧数
AnacondaにPyTorchをインストールしたのに、実際に使おうとするとエラーが出てしまいます
私はmacを使用しています。Anacondaは前から使っていたんですが、そこにPyTorchを入れようと思い次の方法でインストールを試みました。
まず、以下のサイトの「コマンドライン環境の設定」というところに書いてある手順を踏みました。
https://www.python.jp/install/anaconda/macos/install.html
次に、以下のサイト(pytorch公式サイト)...
0
票
1
回答
105
閲覧数
Logistic Regressionで実装しましたが,accuracyが20パーセント台と低いです.
Logistic Regressionによるニューラルネットを実装したのですが,その正解率が低すぎるので,直したいです.
入力xはshape(1,64)でyはラベルでshape(1,6)の配列です.バッチサイズやニューロンの数を変えたりと,ハイパラメータを変えてみたのですが,正答率が上がりませんでした.どなたか,正答率を上げるために,どのような方法がいいでしょうか,ご教示の程,...
0
票
1
回答
1,356
閲覧数
複数の行列の掛け算を同時に行う
Python
numpyかpytorchで複数の行列の掛け算をforループを用いずに同時に行いたいです。
例えば10×100の異なる行列が5個と100×100の行列が一つあるとします。
import numpy as np
a = np.random.rand(5,10,100)
b = np.random.rand(100,100)
aが10×100の異なる5個の行列でbが100×...
0
票
0
回答
1,252
閲覧数
cx_Freezeでexe化したPytorchを使用したpythonスクリプトのエラーについて
初めまして。とても困っているので誰か助けてください。
pytorchを使用したpythonプログラム(test2.pyとする)をcx_Freezeでexe化して、生成されたexeファイルを実行したところ、
"c:\~~~\torch\__init__.py",line 102, in<module>
from torch._C import *
importError:DLL ...
0
票
1
回答
283
閲覧数
numpyからpytorchへの変換
機械学習の予測プログラムを作っているのですが,tensorflowで書いたモデルとpytorchで書いたモデルの2つを作っています.
tensorflowベースで書いた予測モデルをpytorchベースのものに変換したいのですが,うまく行かないです.どのように対処すべきでしょうか?ご教示の程,お願い致します.
処理の流れ:
10秒間データを習得し(1×8配列),リストに入れる.
その最頻値を出し,...
0
票
1
回答
611
閲覧数
PyTorchでのloss関数自作時に出力ベクトル以外の変数も使いたい
PyTorchで機械学習を行っているのですが、loss関数を自作したいと思っています。
今のところ学習用のデータx_train, x_test, y_train, y_testは作成方法として
(1) DNNへの入力データ
Data_A(サイズ[10000,200])→処理1(不可逆変換)→Data_X(サイズ[10000,200])
(2) DNNからの出力データ
Data_A(サイズ[...
1
票
0
回答
148
閲覧数
pythonの継承で使われるsuper(Conv1d, self)が分かりません。
pytorchのコードを見ていたところ、
class Conv1d(_ConvNd):
def __init__(
self,
in_channels: int,
out_channels: int,
kernel_size: _size_1_t,
stride: _size_1_t = 1,
...
1
票
1
回答
264
閲覧数
pytorchのoutputについて
以下のプログラムは手書き数字データセットMNISTを10クラスに識別するものです。
正解数と識別率をevaluate関数で求めているのですが、どのデータがどのクラスに分類されたかを調べるために混同行列を用いてみました。しかし、このプログラムを実行すると、ncorrectの値と混同行列の体格成分の和が一致しません。どうすれば一致するでしょうか。
学習用プログラム
import os
import ...