0

githubにpushするにあたり

git push

をしたとき,

Delta compression using up to 6 threads.
Compressing objects: 100% (437/437), done.
Writing objects: 100% (445/445), 221.08 MiB | 7.39 MiB/s, done.
Total 445 (delta 3), reused 0 (delta 0)
remote: Resolving deltas: 100% (3/3), done.
remote: error: GH001: Large files detected. You may want to try Git Large File Storage - https://git-lfs.github.com.
remote: error: Trace: 46e6e6146393dfce0c018b2491623426
remote: error: See http://git.io/iEPt8g for more information.
remote: error: File SRCNN-pytorch/BLAH_BLAH/91-image_x3.h5 is 181.82 MB; this exceeds GitHub's file size limit of 100.00 MB
remote: error: File SRCNN-pytorch/BLAH_BLAH/91-image_x4.h5 is 180.89 MB; this exceeds GitHub's file size limit of 100.00 MB
To https://github.com/Hika-Kondo/Super_Resolution.git
 ! [remote rejected] master -> master (pre-receive hook declined)
error: failed to push some refs to 'https://github.com/***/Super_Resolution.git'

とエラーが出たため,

git rm --cache /SRCNN-pytorch/BLAH_BLAH

をし,

git ls-files

でgit管理下ファイルを確認したところ

SRCNN-pytorch/.gitignore
SRCNN-pytorch/README.md
SRCNN-pytorch/data/butterfly_GT.bmp
SRCNN-pytorch/data/butterfly_GT_bicubic_x3.bmp
SRCNN-pytorch/data/butterfly_GT_srcnn_x3.bmp
SRCNN-pytorch/data/ppt3.bmp
SRCNN-pytorch/data/ppt3_bicubic_x3.bmp
SRCNN-pytorch/data/ppt3_srcnn_x3.bmp
SRCNN-pytorch/data/zebra.bmp
SRCNN-pytorch/data/zebra_bicubic_x3.bmp
SRCNN-pytorch/data/zebra_srcnn_x3.bmp
SRCNN-pytorch/datasets.py
SRCNN-pytorch/models.py
SRCNN-pytorch/prepare.py
SRCNN-pytorch/test.py
SRCNN-pytorch/thumbnails/fig1.png
SRCNN-pytorch/train.py
SRCNN-pytorch/utils.py

となりエラーの出たファイルが管理下から外れていることを確認し
再度

git push

しましたが

Delta compression using up to 6 threads.
Compressing objects: 100% (437/437), done.
Writing objects: 100% (445/445), 221.08 MiB | 7.39 MiB/s, done.
Total 445 (delta 3), reused 0 (delta 0)
remote: Resolving deltas: 100% (3/3), done.
remote: error: GH001: Large files detected. You may want to try Git Large File Storage - https://git-lfs.github.com.
remote: error: Trace: 46e6e6146393dfce0c018b2491623426
remote: error: See http://git.io/iEPt8g for more information.
remote: error: File SRCNN-pytorch/BLAH_BLAH/91-image_x3.h5 is 181.82 MB; this exceeds GitHub's file size limit of 100.00 MB
remote: error: File SRCNN-pytorch/BLAH_BLAH/91-image_x4.h5 is 180.89 MB; this exceeds GitHub's file size limit of 100.00 MB
To https://github.com/Hika-Kondo/Super_Resolution.git
 ! [remote rejected] master -> master (pre-receive hook declined)
error: failed to push some refs to 'https://github.com/***/Super_Resolution.git'

となりました.
この場合どのようにpush すればよろしいでしょうか?

2 件の回答 2

1
  • エラーが出ていたのは カレントディレクトリ 以下の SRCNN-pytorch/BLAH_BLAH/91-image_x* です。
    一方で、あなたが git rm で指定した /SRCNN-pytorch/BLAH_BLAH というパスは ルートディレクトリ 以下の絶対パスになっており、両者は別物です。コマンドを実行したとき、別のエラーになりませんでしたか?

  • git rm で指定するのは基本的に ファイル名 です。あなたが指定したのは ディレクトリ なので、
    例えば git rm SRCNN-pytorch/BLAH_BLAH/* のような指定を行う必要がある気がします。

0

エラーメッセージの通りで、ひとつのファイルの大きさが100メガバイトを越えているから拒否されています。
有料契約して、git lfs 設定すれば、大丈夫です。


わかりにくかったと自己反省したので追記

github に具体的な説明があります。

ファイルを Git にプッシュしようとしたとき、「これは Git LFS のファイル サイズ制限である 100 MB を超えています」という趣旨のエラーが表示された場合

既に問題のファイルは過去に commit 済みではないでしょうか?
そのため --chace で今からコミットするファイルを削除してももう手遅れです。

git のコミットをさかのぼって エラーの出ているファイルを 削除するためには
履歴の書き換え
を行う事が根本的な解決です。

少々複雑な手順なので、勉強の意味を兼ねて挑戦してみてください。

まだ、コミット件数が少ない場合には 過去の履歴をあきらめて、
新たに大きなファイルを含まずに コミットするという方法もあります。

github のディスク容量の制限

github には 1日に送信できる 1ファイルあたりのサイズに制限を設けています。
アカウントの Billing の中 アカウントの Billing の中

また、git lfs の使い方に関する詳しい説明 のページもあるので
試してみてください。
これも、すでにコミットした大きなファイルに対する過去の履歴書き換えを
行い、そのファイルを改めて git lfs の追跡対象とする手順となっています。

1日あたりの push 量に制限があるので 1か月だけ有料契約して push してその後、無料契約に戻るというわざ(?)も使えます。

2
  • 1
    最近は open source のツールがあるので 簡単に 過去にコミットしたファイルの削除ができるんですね。help.github.com/ja/github/authenticating-to-github/…
    – user18851
    Commented 2019年12月19日 23:19
  • ありがとうございます。書き換えに挑戦してみようと思います。
    – user31609
    Commented 2019年12月21日 3:48

この質問に回答するには、ログインする必要があります。