[amazon-s3] タグが付いた質問
33
未回答やベストアンサーなし質問
3
票
0
回答
216
閲覧数
wagtail(Django CMS)アプリをherokuにデプロイ後、読み込みはされるものの画像が反映されない
いまだ問題解決にいたっておらず情報源を増やすため、下記サイトからこちらにマルチポストしました。変更などがあった際には双方にて追記していきます。
大きく変更した部分や状況が変わった部分があるため、以前の文章についてはイタリック体、最新のことについては太字、以前のコードについてはコメントアウトに変更しています。**
リンク内容
大まかな現状
様々なサイトなどをみてherokuにデプロイはできたが、...
3
票
0
回答
252
閲覧数
forkしたHerokuリポジトリへpushできない
herokuにpushすると成功するリポジトリがあります。
これをフォークします。
% heroku fork -a app app-staging
フォークしたリポジトリへpushします。
% git remote add staging git@heroku.com:app-staging.git
% git push staging master --force
...
1
票
0
回答
85
閲覧数
googleの更新でSharedArrayBufferが使えなくなったのでAWSのCORSについて教えていただきたいです
javascriptライブラリを使っていたのですがグーグルの更新でSharedArrayBufferが定義されてませんとエラーが出て、最近解決の参考にしてたのURLと近い状態になりました。
Chrome 92以降のSharedArrayBuffer警告に対するZOZOTOWNが実施した調査と解決策
CORSを以下のように分離させたらJSライブラリが起動しましたが、...
1
票
0
回答
67
閲覧数
lambdaで使っているbatchwriterのエラーの原因が解りません。
lambdaで使っているbatchwriterのエラーの原因が解りません。
前回の質問で使った以下のテンプレート
https://raw.githubusercontent.com/aws-samples/csv-to-dynamodb/master/CloudFormation/CSVToDynamo.template
このテンプレートで作られたs3バケットにcsvをアップすると
...
1
票
0
回答
512
閲覧数
AmazonAuroraMySQLの「SELECT * INTO OUTFILE S3」で「FORMAT{ CSV|TEXT} [HEADER]」オプションが使用できない
環境
AuroraMySQL 5.6.10a (provisioned)
ap-northeast-1
動作OK
SELECT * FROM [Table] INTO OUTFILE S3 's3uri'
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '"'
LINES TERMINATED BY '\n';
は正常に実行されますが、...
1
票
0
回答
535
閲覧数
Amazon EMRでS3に書き込みの際に503 Slow Downが発生する
Amazon EMRでPySparkを動かしています。
その際にS3にparquetで保存する処理中にAmazonS3Exceptionが発生致します。
コードは以下の通りです。
s3_path = 's3://hoge/huga/'
df.write.format('parquet').mode('overwrite').save(s3_path)
インスタンスはマスタノード、...
1
票
2
回答
1,376
閲覧数
AWS CLI経由でS3上の画像をAmazon Rekognitionに掛けたい
AWS CLI経由で、S3上に配置した画像をAmazon Rekognitionに投げ、文字認識(DetectText)をしたいと思っていますが、エラーでうまくいきません。
aws rekognition detect-text --image "S3Object={Bucket=mybucket,Name=text.jpg}" --region ap-northeast-1
...
1
票
0
回答
163
閲覧数
QNAPのObject Storage Serverを使っていますがコンテナの中身(リスト)が見れない
QNAPでObject Storage Server(OSS)を使っています。
他のLinuxでs3cmdをインストールしてアクセスしてみました。
QNAPでは
sample01
sample02
のコンテナがあります。両方ともPublicにしています。
# s3cmd ls
2009-02-03 16:45 s3://sample01
2009-02-03 16:45 s3://...
1
票
0
回答
82
閲覧数
S3からRedShiftにcopyしてもデータが空になってしまう
S3からRedShiftにデータを格納したいのですが、データが空の状態で格納されてしまいます。
(サーバー情報など一部データを伏せております)
・S3に格納してあるデータ
{"message":"unixtime:1445847958\tdatetime:26/Oct/2015:17:25:58 +0900\tx-forwaded-for:****\thost:****\tsize:0\...
0
票
0
回答
45
閲覧数
GlueでS3のparquetファイルを使用する際にスキーマを自動で追加したい。
glueContext.create_dynamic_frame.from_catalogに
additional_options={"mergeSchema": "true"}
を追加するとGlueデータカタログのスキーマが後から変更された際にも自動でスキーマを調整してくれます。
glueContext....
0
票
0
回答
58
閲覧数
CloudFrontのキャッシュ削除について(HLS配信に伴うCORS設定の反映)
S3×CloudFrontを使いHLS配信の実装をしております。
CloudFrontでCORS設定(ディストリビューションのビヘイビアの編集)を行なった結果、HLS配信はできたのですが、次は動画と同じS3バケットにある画像が403で読み込めなくなりました。
問題の切り分けの為に、CloudFrontのビヘイビアの変更を即時反映させて確認したいと考えていますが、...
0
票
0
回答
106
閲覧数
ReactPlayer(hls.js)でHLS配信を実現 CloudFrontエラー「The value of the 'Access-Control-Allow-Origin' header in the response must not be the wildcard '*'」
ReactPlayer(hls.js)を用いて、HLS配信を行おうと考えています。
HLS配信を行う為に必要なS3やCloudFrontの設定は一通りしたつもりですが、動画配信画面でエラーが出ています。
Access to XMLHttpRequest at 'https://cdn.hogehoge.com/movies/hogehoge.m3u8' from origin 'https://...
0
票
0
回答
76
閲覧数
Rails6 Action Text 本番環境での画像保存エラー
Rails6でAction Textを入れました。
開発環境でlocalには画像を保存できるのですが、本番環境でAmazon S3に保存しようとすると画像のような横のラインがアップロード時にブラウザ画面に表示され、保存できません。
開発環境の画像保存先をAmazon S3に変えると同様の事象が発生します。
Heorokuを使用しており、以下リンク先を参考に設定しましたが、どうにもうまくできず、...
0
票
0
回答
52
閲覧数
S3のテキストに入力されている電話番号のLambdaの判定について
電話番号(+81377775555)から発信した場合でも、下記のS3のリストにないにもかかわらず、
AmazonConnect側で一致する判定をしてしまいます。
エラーとかも表示されず、通常通り着信もしますので、Lambdaのコードが間違っているのでしょうか?
S3
+81312345678
+81355557777
+81387654321
Lambda
const aws = require(...
0
票
0
回答
72
閲覧数
Glue crawlerで作成したcatalog tableでデータがヒットしない
AWSの勉強のためにGlue Crawlerを使って、S3からCSVをData Catalog化してAthenaでデータを読み込むことにトライしています。
データセットはKaggleの
https://www.kaggle.com/datasets/mkechinov/ecommerce-behavior-data-from-multi-category-store
からダウンロードしたものです。
...
0
票
1
回答
124
閲覧数
DynamoDBへの反映の順番とタイトル行の削除について
DynamoDBテーブルへの登録順番が
「0→1→2→5→3→4→6→11→10→8→7→9」
となります。
「emp_data」の後の数字の順番ではないのでしょうか?
また、CSVにはタイトル行が含まれておりますので、2行目から取得する場合、
どのようなコードを追加したらよいのでしょうか?
よろしくお願いいたします。
import boto3
# S3、DynamoDBテーブルへの接続準備
...
0
票
1
回答
587
閲覧数
Nuxt3で aws-sdk(v2) 使用時に Cannot read properties of undefined (reading 'memoizedProperty') が発生
Nuxt3を使用して、WEBアプリケーションを開発しています。
Nuxt3でaws-sdk(v2)を読み込んだところ、
ローカルのyarn devコマンドでは正常にAWSSDKの実行はできているのですが、
nuxt generate && nuxt startコマンドで表示を行うと、ブラウザのコンソールログに、
Cannot read properties of undefined ...
0
票
1
回答
101
閲覧数
embulkでs3のデータをrdsへETLしようとするとFOREIGN_KEY制約のエラーが発生する
embulkでs3のデータをrdsへETLしようとするとFOREIGN_KEY制約のエラーが発生します。
具体的には以下のようなエラーです。
java.lang.RuntimeException: com.mysql.jdbc.exceptions.jdbc4.MySQLIntegrityConstraintViolationException: Cannot delete or update a ...
0
票
0
回答
104
閲覧数
wagtail + s3 + Heroku でウェブアプリ開発をすると画像アップロードでinternal error 500が出る。
こちらの質問は以下の質問の延長部分にあたります。
元の質問
またテラテイルでもマルチポストしています。(21/08/19)
マルチポスト先
###症状
画像をアップロードするとInternal server error 500が表示され、読み込まれなくなった。
また、ログにもエラーらしきものは見られない。
###開発環境
Django==3.2.6
gunicorn==20.1.0
...
0
票
2
回答
62
閲覧数
STATIC_URL = "https://%s/%s/" % (AWS_S3_CUSTOM_DOMAIN, AWS_LOCATION)の%についての質問
Amazon S3 実装の際に以下のような書き方のコードが散見されました。
STATIC_URL = "https://%s/%s/" % (AWS_S3_CUSTOM_DOMAIN, AWS_LOCATION)
これはそれぞれを % に代入するということですか?
それともこれをそのまま貼り付けて良いということですか?
0
票
1
回答
341
閲覧数
Laravelを利用してAmazon S3に画像を保存できない
Amazon S3で画像を保存したいと思いましたが、下記エラーで保存ができません。
アクセス権限は許可しています。
putでファイルを送信するとエラーが出力される:
.envのアクセスキー及び、シークレットアクセスキーも誤りがないのでそのへんは関係ないのかなとは思うのですが。
ちなみに以下のようにバケットから画像を取得することはできます。
S3のバケットから画像の情報のgetはできるのですが、...
0
票
1
回答
521
閲覧数
Amazon S3 から FSx for Windows へのファイルコピー方法を教えて下さい
Lambda (Python) を使用して、S3に保存されたことをトリガーとして FSx for Windows にファイルをコピーしたいです。
しかし、検索エンジンで調べても対象の検索結果が見つかりません。
公式ドキュメントには記載なし:
https://docs.aws.amazon.com/ja_jp/fsx/latest/WindowsGuide/what-is.html
そもそも S3 ...
0
票
0
回答
2,864
閲覧数
python boto3を使用してaws s3のオブジェクトを一括ダウンロードしたい
現在非常にもどかしい状態になっているので、どうかお力添えを頂けましたら幸いです。
S3にある複数のオブジェクトをpythonのboto3を使用してダウンロードしようとしています。
その際にオブジェクトをワイルドカードを使用してダウンロードしたいのですができません。
AWS CLIであれば下記コマンドで実現できる処理です。
aws s3 cp
--recursive \
--exclude '...
0
票
1
回答
249
閲覧数
本番環境でAction_TextでS3に画像をアップロードする際に画像が編集画面にしか表示されない
本番環境下でAction_Textを活用してrich_text_areaからS3に画像をアップロードした際に編集画面からしか画像が表示されません。
ちなみにS3には画像が保存されており、file_fieldでアップロードした画像の表示はできております。
画像が編集画面でのみ表示され、本番環境で表示されないことについてどなたかご存知の方がおられましたらご教示いただけますと幸いです。
ビュー(フォーム)...
0
票
1
回答
433
閲覧数
Active_Storageで投稿した画像をAWS S3にアップロード及びAWS S3から取得した画像を表示
Active_Storageを使用して写真をアップロードする機能を実装しました。
デプロイ後、写真をあげる際にS3を使用してデータベースに保存・からの取得を試みています。
S3に開発環境からアップロードした画像のオブジェクトURLは"https://<バケット名>.s3-ap-northeast-1.amazonaws.com/<キー>"...
0
票
0
回答
447
閲覧数
aws-sdk-php v2 で キーペア無しで EC2 Role を利用してS3アクセスする方法
EC2 上で aws_sdk_ruby を使って
Aws::S3::Client.new
で引数をつけないで S3 クライアントを作成した ruby プログラムは
自動的に EC2 Role の権限によって動くようなのですが
(EC2 に S3Full をつけたりはずしたりすると動いたり動かなかったりする)
Fuel 上の aws-sdk-php ...
0
票
1
回答
163
閲覧数
AWSでS3のs3fsの証明バージョン2から4にバージョンアップ手順について
AWSでS3のs3fsの証明バージョン2から4にバージョンアップする手順について、
教えていただけますでしょうか。
署名バージョン2のままですと、6月24日に廃止のためです。
S3バケット・オブジェクトにアクセスできなくなるためです。
追記
インストールは別の方が何年も前に対応しました。そのため、前任者の対応が不明の状態です。
その方に確認してみます。
以上、よろしくお願いいたします。
0
票
1
回答
97
閲覧数
s3 bucket を rubygems の置き場として取り扱うような方法・ライブラリはある?
docker には、 docker repository のバックエンドを s3 bucket にすることができます。 https://docs.docker.com/registry/storage-drivers/s3
ふと、同様のことが rubygems でも実現可能なのではないか、と思いました。
質問
rubygems.org のような、 gem ...
0
票
1
回答
851
閲覧数
Railsのレスポンスで複数の画像ファイルを同時に返したい
現在RailsとReactNativeを使ってモバイルアプリの開発をしています。
やりたいこと
サーバーサイドでs3からダウンロードした画像を、直接クライアントに複数枚まとめて送りたい。
現在の実装
クライアントからアップロードされた画像はS3に保存していて、保存した画像をクライアントに返す際はs3のpresigned_urlを返してクライアントサイドで読み取り、表示させています。
...
0
票
1
回答
61
閲覧数
awsのpolicyの作り方を教えてください
{
"Version": "2012-10-11",
"Id": "Policy1503119012324",
"Statement": [{
"Sid": "Stmt15031190096534",
"Effect": "Deny",
"Principal": "*",
"Action": "*",
"Resource": "arn:aws:...
0
票
1
回答
2,016
閲覧数
S3 のオブジェクトをアトミックにリネームしたい
特定のバケット内に gzip 圧縮されてるのに拡張子が .json で保存されてるのですが
このままだとバッチ処理でうまく gz ファイルと認識してくれないみたいなので
.json を .json.gz にリネームしたいです
ただすでにサービス運用中でこのバケット内に常にAPIから書き込みがあって
json.gz 存在チェック → リネーム という処理がアトミックではないので
...
-1
票
1
回答
2,229
閲覧数
CloudFrontとS3の構成でExpiresが追加できません。
当方はフロントエンジニアでサーバー周りの知識は浅いです。
AWSのEC2でWordpressを使用しS3に保存した画像ファイルをにおいて、CloudFrontからキャッシュさせてたいのですが、ブラウザキャッシュについてExpiresが設定できずに困っています。
解決策もしくは、他のベストプラクティスなどがありましたらご教示ください。
■構成
Route53→CloudFront→S3(画像のみ)...
-2
票
2
回答
417
閲覧数
S3サーバーから取得したファイルを結合したい
S3サーバーから取得したファイルとアップロードしたファイルを結合したいと考えて
下記のコードを作成いたしました。
public function uploadJoin(Request $request)
{
$file = $request->file('file');
$content = \Storage::disk('s3')->get( $file_name );...