[pytorch] タグが付いた質問
PyTorchに関する質問にこのタグを使用します。 PyTorchは、Pythonで実装されたオープンソースの機械学習ライブラリーです。Luaで実装されたTorchをベースに、Facebookの人工知能研究グループにより開発されました。
55
質問
0
票
0
回答
27
閲覧数
ValueError: Expected input batch_size (256) to match target batch_size (16).のエラー
DeepLearningのコード(WideResNet)を実装しようと思い、自作のデータセットによる学習を試みているのですが、損失の計算時にエラーが出ます。
実装をメインとしており、自作データで学習をすることが目標で、アルゴリズムそのものの理解ができておらず、至らぬ点がありますが、ご教示ください。よろしくお願いいたします。
コメントアウトなどを削除したため、...
0
票
1
回答
85
閲覧数
jupyterLab でPILライブラリを使用した際に取り込んだ画像のインライン表示ができない。
マイナビ出版から出ている「PyTorch実践入門」を進めるにあたり下記の問題が発生しました。
本書の推奨環境はJupyterとなっている為、DockerHubから以下をpullしています。
% docker run --rm -d -v $PWD:/app -p 8888:8888 \pman0214/pytorch_jupyterlab:1.9.0
runコマンド引用サイト
M1 ...
0
票
1
回答
269
閲覧数
TypeError: linear(): argument 'input' (position 1) must be Tensor, not tupleをうまく解消できない
pytorchで学習したモデルの推論を行いたいです。
モデルは、入力は2つ、出力は1つです。
そのため、入力を2つ入れて推論を行おうとしましたが、うまく動きません。
どうすればうまく動かせるのですか?
x_1 = np.arange(0.49, 1+2*10**-3, 2*10**-3)
x_2 = [0.8 for i in range(len(x_1))]
...
0
票
0
回答
221
閲覧数
Attempting to deserialize object on a CUDA device but torch.cuda.is_available() is Falseが解消できない。
pytorchで推論をしようと保存したモデルを読み込もうとするとエラーが出てきます。
Google colabの環境下で、gpuで学習を行い、CPUしかない環境下で以下のプログラムを実行するとエラーが出てきます。
model = Model
model.load_state_dict(torch.load("185.pth"))
model.load_state_dict(...
0
票
0
回答
95
閲覧数
Optunaでのモデルの保存方法がわかりません。
Optunaでのモデルの保存方法がわかりません。
Optuna自体の使い方は、githubのコードを見ることで理解できましたが、
ベイズ最適化を用いて自動的にモデルの各パラメータを決めて作成したモデルの保存の仕方ががわかりません。
Optunaを使うことで、最適なパラメータを算出することができますが、態々その最適条件でのパラメータの条件を自分で実行するのが無駄なので、Optunaをつかって、...
0
票
0
回答
127
閲覧数
GANをPytorchで実装したときに、backwardでエラーが起きる。
GANの派生モデルであるCreative Adversarial Networksを1から実装しているのですが、損失を逆伝播する際にエラーが出てしまいます。
/usr/local/lib/python3.7/dist-packages/torch/autograd/__init__.py:156: UserWarning: Error detected in MmBackward0. ...
0
票
0
回答
73
閲覧数
YOLOv5での実行結果が再現できません(コードを共有しても得られるモデルファイルが異なってしまう)
Google Colab Pro+上のGPUマシンでYOLOv5を用いた学習を行っています。
友人とjupyter notebookを共有したところ、こちらと友人側とで得られる結果が異なり困っています。
環境:Google Colab Pro+
仮想マシンのGPU:Tesla P100
%cd /path/to/YOLOv5/
!python train.py --img $IMGSIZE --...
0
票
1
回答
121
閲覧数
torch.autograd.gradが0またはNoneTypeになってしまう
以下のコード中のtorch.autograd.gradの偏微分の計算で,Noneになってしまいます.
torch.autograd.gradの中身を見ることが出来ませんので,偏微分の計算中に何かしら問題が起こっている?と思いますが,どうなっているかがいまだに不明です.
なお,torch.autograd.gradで用いられるlossとparams.values()はきちんと値が出力されます.
...
0
票
0
回答
425
閲覧数
torchinfo.summaryでのエラーおよび、引数のエラー
pytorchにおいてtorchsummaryでモデルの構造をファインチューニングするため、可視化するため、以下を実行しました。
print(summary(model, input_size=([(10,1684,40),(10)])))
forward関数は2入力となっているので、引数を2つ入力しています。モデルのforward関数における引数の次元数はそれぞれ3次元と1次元です。しかし、...
2
票
1
回答
1,032
閲覧数
torchvisionのimage.pydが見つからない
初めまして。ネット上で調べましたが、解決策が無くて困っています
pytorchを使いたいと思い、torchとtorchvisionをインストールしたのですが、torchvisionをインポートすると
下記Warningが発生します。
import torch
import torch.nn as nn
import torch.nn.functional as f
from torch.utils....
0
票
0
回答
85
閲覧数
pytorchで学習データをうまく読み込むことが出来ません。
pytorchで学習データをうまく読み込むことが出来ません。
colab上で、GPUで学習させて、テストをしようと思っているのですが、
テスト時にcpuを使えとエラーが出てくるため、
<ipython-input-15-b47e8b21940b> in test(model, x)
1 def test(model, x):
----> 2 y_pred = ...
0
票
0
回答
122
閲覧数
このようなエラーが発生したのですが、これはどういう意味ですか?因みにpytorchを用いて機械学習を学んでおります。
TypeError: empty() received an invalid combination of arguments - got (tuple, dtype=NoneType, device=NoneType), but expected one of:
* (tuple of ints size, *, tuple of names names, torch....
0
票
0
回答
68
閲覧数
pytorchでうまくニューラルネットワークを動かせません
import torch
import numpy as np
import os
import pandas as pd
import glob
import torch.optim as optim
import torch.nn as nn
import torch.nn.functional as F
class Model(nn.Module):
# コンストラクタ(...
0
票
0
回答
104
閲覧数
GooglecolabでCycleGANを実行したのに1エポックの実行時間が長すぎます
以下のサイトに従ってGooglecolabでPytorchのCycleGANを実行したのですが1エポックに約30分も時間がかかってしまいます。このサイトでは1エポックに6分くらいかかると書いてありました。
CycleGAN で画像変換する。
ほかのサイトでも1エポックに6分当たりかかると書かれており私の実行時間よりとても短いです。なぜ私が実行すると30分もかかってしまうのかが分からず困っております。...
1
票
0
回答
100
閲覧数
複数GPU搭載のサーバ上での他のGPU上でプログラムが実行されると、CPU実行になってしまう。
4枚のGPUを積んだサーバ上で、全GPU空いている状態で私のプログラムを実行するとGPU上で実行できるのですが、GPU ID: 1〜3が使用されている状態で、GPU ID: 0で実行しようとしても、GPUが使用されず CPUでの実行になってしまいます。また、逆に私がGPU ID: 0で実行中に、GPU ID: 1〜3で実行されると、私のプログラムだけCPU実行になってしまいます。...
0
票
0
回答
438
閲覧数
No module named 'torch.nn'; 'torch' is not a packageのエラーを直したい
pytorchをインストールして、インストールできたことも確認したのですが、以下のエラーが発生してしまいます。どなたか解決法をご教示お願い致します。
エラーメッセージ
import torch.nn as nn
ModuleNotFoundError: No module named 'torch.nn'; 'torch' is not a packages
ソースコード
import ...
0
票
0
回答
775
閲覧数
YOLOv5でオブジェクトの特徴量を取得したい
こんにちは。学習済みモデルを使用したYOLOv5でオブジェクトの特徴量を取得したいです。オープンソースの「detect.py」から取得できるのではないかと考えているのですが、該当部分まで推測できていません。推論に使用されるオブジェクトの特徴値を取得するにはどうすればよいのでしょうか?ご教授いただけますと幸いです。以下「detect.py」のコードです。
Usage:
$ python ...
0
票
0
回答
2,509
閲覧数
AnacondaにPyTorchをインストールしたのに、実際に使おうとするとエラーが出てしまいます
私はmacを使用しています。Anacondaは前から使っていたんですが、そこにPyTorchを入れようと思い次の方法でインストールを試みました。
まず、以下のサイトの「コマンドライン環境の設定」というところに書いてある手順を踏みました。
https://www.python.jp/install/anaconda/macos/install.html
次に、以下のサイト(pytorch公式サイト)...
0
票
1
回答
317
閲覧数
PyTorchでのloss関数自作時に出力ベクトル以外の変数も使いたい
PyTorchで機械学習を行っているのですが、loss関数を自作したいと思っています。
今のところ学習用のデータx_train, x_test, y_train, y_testは作成方法として
(1) DNNへの入力データ
Data_A(サイズ[10000,200])→処理1(不可逆変換)→Data_X(サイズ[10000,200])
(2) DNNからの出力データ
Data_A(サイズ[...
1
票
0
回答
100
閲覧数
pythonの継承で使われるsuper(Conv1d, self)が分かりません。
pytorchのコードを見ていたところ、
class Conv1d(_ConvNd):
def __init__(
self,
in_channels: int,
out_channels: int,
kernel_size: _size_1_t,
stride: _size_1_t = 1,
...
0
票
1
回答
173
閲覧数
numpyからpytorchへの変換
機械学習の予測プログラムを作っているのですが,tensorflowで書いたモデルとpytorchで書いたモデルの2つを作っています.
tensorflowベースで書いた予測モデルをpytorchベースのものに変換したいのですが,うまく行かないです.どのように対処すべきでしょうか?ご教示の程,お願い致します.
処理の流れ:
10秒間データを習得し(1×8配列),リストに入れる.
その最頻値を出し,...
0
票
1
回答
174
閲覧数
pytorchでの学習したモデルの呼び出しとクラスの呼び出しの方法
pytorchでの機械学習用のコードを実装し,次に予測するコードを実装しています.
pytorchで学習したモデルを呼び出そうとしたら,モデルの呼び出しではなく,なぜか,呼び出したプログラムが開始してしまします.どなたか,正しい学習済みのモデルとクラス及び変数の呼び出し方を教えてください.2つのプログラムファイルは同じディレクトリにあり,学習プログラムはRECurrentSNN.py,...
0
票
1
回答
87
閲覧数
Logistic Regressionで実装しましたが,accuracyが20パーセント台と低いです.
Logistic Regressionによるニューラルネットを実装したのですが,その正解率が低すぎるので,直したいです.
入力xはshape(1,64)でyはラベルでshape(1,6)の配列です.バッチサイズやニューロンの数を変えたりと,ハイパラメータを変えてみたのですが,正答率が上がりませんでした.どなたか,正答率を上げるために,どのような方法がいいでしょうか,ご教示の程,...
1
票
1
回答
103
閲覧数
pytorchのoutputについて
以下のプログラムは手書き数字データセットMNISTを10クラスに識別するものです。
正解数と識別率をevaluate関数で求めているのですが、どのデータがどのクラスに分類されたかを調べるために混同行列を用いてみました。しかし、このプログラムを実行すると、ncorrectの値と混同行列の体格成分の和が一致しません。どうすれば一致するでしょうか。
学習用プログラム
import os
import ...
0
票
0
回答
1,123
閲覧数
Pythonでエラーが出てしまう: IndexError: index 100 is out of bounds for dimension 0 with size 100
下記のプログラムを実行すると、エラーメッセージが出てしまいます。
実装したいこととしては、Aを混同行列としてA[pred[i]][y[i]]に1を足しこみたいです。
エラーメッセージ:
File "cnnTm.py", line 61, in <module>
lossT, accT, ncorrectT = cnnL.evaluate(model, XT,...
0
票
1
回答
1,091
閲覧数
Expected input batch_size (1) to match target batch_size (6).のエラーを直したいです.
機械学習のコードを実装しており,LogisticRegression(nn.Module)をモデルにしています.
損失lossの計算時に配列のサイズのミスマッチに関するエラーがでます.xはshape=[1,64],yはshape=[1,6]です.
エラーに該当するfor文内はxはshape=[64],yはshape=[6]です.どなたか,このエラーの直し方をご教示下さい.よろしくお願い致します.
'...
0
票
1
回答
1,216
閲覧数
index 1 is out of bounds for dimension 0 with size 1 を直したい
ニューラルネットを作成していますが,損失関数とSGDの更新のプログラムでエラーがでます.出力yは0~5の6つのラベルがあり,それぞれ[1,0,0,0,0,0](ラベル0)のようなone-hot表現となっています.torch.Size([19573, 6])となっていることは確認済みです.
下記エラーの直し方をどなたかご教示の程,よろしくお願い致します.
エラーメッセージ
grads['dl/df']...
0
票
2
回答
853
閲覧数
tensor配列の要素のある場所を取得したいです.
tensor型の配列のインデックスを取得したいのですが,うまくいかず,教えて頂きたいです.以下のような形になっており,最大要素1がある場所だけを抽出したいです.
tensor([[1., 0., 0., 0., 0., 0.], →この場合は0を
[1., 0., 0., 0., 0., 0.],
[1., 0., 0., 0., 0., 0.],
...,
[0....
-2
票
1
回答
3,252
閲覧数
'int' object is not callableを直したいです.
np.ndarray型のデータをfor文に入れて,ニュラールネットを作成しているのですが,うまくいきません.どなたか,ご教示の程,よろしくお願い致します.以下にエラー文と該当箇所を記載いたします.
エラー文
2020-11-11 14:18:42.758237: I tensorflow/stream_executor/platform/default/dso_loader.cc:44] ...
0
票
1
回答
2,514
閲覧数
unexpected EOF while parsing のエラーを直したい
現在,[bindnet][1] というライブラリーを用いてRecurrent Spiking Neural netを作成しており,トレーニングデータ(npzファイル)をload(xとyの値)してシミュレーションを行いたいのですが,enumerate関数で取り出そうとすると,"unexpected EOF while parsing" というエラーが表示されます....
0
票
0
回答
1,001
閲覧数
pip install torch がエラーになる
プログラミング初心者かつ、初質問です。
Pythonでプログラムを書いたところ、import torch の行でエラーになり、pip install torch を行おうとするとエラーになります。virtualenv などのアンインストールを行いましたが治りませんでした。以下、エラー文です。
pip install torch torchvision
Defaulting to user ...
0
票
1
回答
69
閲覧数
torchにおけるサイズ[N,1]と[1,N]の掛け合わせ方
torch形式のベクトルA(サイズ[N,1])とB=A'(サイズ[1,N])を掛け合わせてサイズ[N,N]の行列を算出したいと考えています。
しかしtorch.matmulやtorch.mmではエラーが出てきてしまうか、A'A(サイズ[1,1])が出てきてしまいます。
A = [a_1, a_2, ..., a_N]'とすれば算出したい行列Cの(i,j)成分は
for i in range(N):
...
0
票
0
回答
108
閲覧数
pytorchで作ったCNNが学習しません
以下のようなCNNをpythonで作成したのですが、計算を回したところlossの値が変化しませんでした。
原因がわからないのですが、教えていただけないでしょうか?
from torch.nn import MSELoss
device = 'cuda'
model = Model().to(device)
criterion = MSELoss()
optimizer = Adam(model....
1
票
1
回答
686
閲覧数
Pytorchでの予測ラベルの出力について
僕は今自然言語処理の勉強をしていて、本を参考にしながらコードを書いていました。
最後の予測が本のデータだとテストデータにもラベルがついているため以下のコードで正答率が出力されますが、自分が使用しているデータはテストデータにはTEXTしかないのでこのコードのままだとエラーが出てしまいます。
いろいろコードを改変してみたりしましたがうまく動きませんでした。...
0
票
1
回答
2,012
閲覧数
windows環境でcondaにpytorchが入りません
anaconda環境にpytorchをインストールしようとしているのですが、何度試してもimportエラーが出てしまいます。
anacondaで仮想環境を作り、焼ているのですが、下記のような結果になってしまいます
(nn) C:\Users\USER>conda install pytorch torchvision -c pytorch
Collecting package ...
1
票
1
回答
425
閲覧数
PytorchでSeq2seqを設計したが、同じ単語ばかり出力される
PytorchでSeq2seqを使って文章の校正を行おうとしたのですが、
Decoderから同じ単語しか出力されません。
main.pyです。
これを実行すると訓練などもろもろを実行します。
#main.py
import copy
import torch
import torch.nn as nn
import torch.nn.functional as F
from torch....
0
票
1
回答
337
閲覧数
pytorch この二つのコードの差は何ですか?どうして片方だけエラーが出るのかわかる人教えてください
この二つのコードの差は何ですか?どうして片方だけエラーが出るのかわかる人教えてください
両方torch.Tensor型同士の足し算なのになぜ 片方だけエラーが出るのですか?
わかる人教えてください
コードA
a=torch.tensor([[10]]).to("cuda:0").half()
b=torch.tensor([2]).to("cuda:0").half()
print(type(...
1
票
0
回答
1,394
閲覧数
PytorchでのTransformerの実装に関して
こんにちは
TransformerをPytorchを利用して実装しようとしているのですが、
おもったような結果になりません。
以下が、訓練のコード、モデル定義のコード、データローダと出力結果のファイルです。
訓練のコード
Train.py
from transformer import EncoderDecoder, Encoder, LayerNorm, EncoderLayer, ...
1
票
1
回答
1,418
閲覧数
Pytorch が import できない
Macを使用しています。
Anaconda-NavigatorにてJuypter NotebookをLaunchし、ターミナルが起動し、Juypter Notebookのページが立ち上がるので、そこで新しいノートブックを作って、そこで作業している状況です。仮想環境は構築していません。
Pytorchを使いたく、インストールしたのですが、importができません。
...
0
票
1
回答
308
閲覧数
torchtext.data.Iteratorでdataloaderを作成すると、結果が転値(Transpose)されてしまう
手元のCSVファイル(テキスト, ラベル)をtorchtextで読み込んでdataloaderにしたいのですが、結果が転置されてしまいます。
train_loaderのshapeは(Batch_size, vocabrary_size)となるかと思うのですが、(vocabrary_size, Batch_size)となってしまいます。
どなたか原因を指摘頂けないでしょうか。
# フィールド定義
...
0
票
1
回答
809
閲覧数
pytorchのインプレース操作のRunTimeErrorに関する解決策の質問です
以下のコードでエラーが起きてしまいます.もしよろしければ,ご教授のほどよろしくお願いいたします.
質問し慣れていないので,至らないところもあるかもしれませんが,何卒よろしくお願いいたします.
該当コード(torch.autograd.set_detect_anomaly(True)によって表示された箇所)
class UnNormfunc(nn.Module):
def ...
0
票
1
回答
2,243
閲覧数
PyTorchのBidirectional LSTMにcudnnを導入するとRuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILEDを出す
実行環境
OS:windows10
python:3.7.4
numpy:1.16.5
pytorch:1.3.1
gpu:GeForce GTX 1060
Nvidia driver:441.87
Cuda:10.1
Cudnn:7.6.5
実行コードに関しましては頂いたものなので詳しくは省かせて頂きますが、Bidirectional LSTMを実装しています。
エラーメッセージ
...
0
票
1
回答
909
閲覧数
PyTorch Tensor 使用時のエラー
PyTorch 1.1 : Getting Started : サンプルによる PyTorch の学習 – PyTorch
上記サイトのコードを参考に、質問に載せたコードを実行するとエラーが出てきて困っております。
実行環境
python3.7.6
pytorch1.3.1
numpy1.17.4
gpu:GeForce GTX 1660 Ti
Cuda:10.1
Cudnn:7.6.5
...
0
票
1
回答
158
閲覧数
PyTorchで行列計算
PyTorchを使って、深層学習をしています。
forward計算内でnumpyのnp.tileやnp.reshapeなどを使っているのですが、Tensor型をnumpyのndarray型に変換してしまうと、requires_gradの情報が失われ、学習ができません。
Tensor型のままtileのような処理を実行する方法はありますでしょうか。
もしくは、...
1
票
1
回答
757
閲覧数
pytorchでdeep learningの画像分類モデルを作成しています。
モデルのloss関数の一部にtorch.sqrt()をしようしたところ、backward時にnanが発生する問題に突き当たりました。
torch.sqrt()に入力されるベクトルの要素の大きさがとても小さいことが原因のようです。
torch.sqrt()のinputが小さいとbackward時に1/(2*torch.sqrt())がinfになるようです...
...
4
票
2
回答
893
閲覧数
訓練データとテストデータの評価の差
ある数値を予測するコンペの問題をPythonでやってます。
与えられた訓練データから使えそうな特徴量だけを取り出し、同様にテストデータから訓練データと同じ特徴量を取り出しました。
https://www.kaggle.com/serigne/stacked-regressions-top-4-on-leaderboard/notebook
上記を参考にして、取り出したデータをもとにLASSO ...
0
票
0
回答
312
閲覧数
pytorchのcuda10.0がインストールできない。公式サイト指定のコマンドで実行してもcuda9.0用がはいる
私の環境は
ubuntu18.04
cuda 10.0
です。
そこで、pytorch公式サイトでインストールを試みたところ
pip3 install https://download.pytorch.org/whl/cu100/torch-1.1.0-cp36-cp36m-linux_x86_64.whl
でうまく入りませんでした。
torchvisonはcuda10.0のものが入りました。...
0
票
0
回答
188
閲覧数
pytrorchをターミナルでインストールしたが、入っていない
問題点
TerminalでPytorchをinstallしたが、pip freezeで確認したところ表示されておらず、インストールしたい
使用PCはmacOS Mojave, MacBookPro
ターミナルでPytorchをinstallしたコードと結果
(tf16cpu) bash-3.2$ conda install pytorch torchvision -c pytorch
...
1
票
0
回答
1,958
閲覧数
PyTorchでCUDAが使えない
PyTorchでCUDAを使って計算しようとしたところ、下記エラーが吐かれてしまいました。
RuntimeError: Expected object of backend CPU but got backend CUDA for argument #4 'mat1'
このエラーの対処方法をご教授していただけないでしょうか。
コードは下記の通りで、...
0
票
0
回答
921
閲覧数
cx_Freezeでexe化したPytorchを使用したpythonスクリプトのエラーについて
初めまして。とても困っているので誰か助けてください。
pytorchを使用したpythonプログラム(test2.pyとする)をcx_Freezeでexe化して、生成されたexeファイルを実行したところ、
"c:\~~~\torch\__init__.py",line 102, in<module>
from torch._C import *
importError:DLL ...