フロントエンドから Amazon S3 にマルチパートアップロードしたい - カミナシ エンジニアブログ

はじめに Presigned URL（*) などで、Amazon S3 へのアップロード処理を実装していると、大きなサイズのファイルをアップロードしようとしたときに、以下のような課題に直面することがあります。 一回のPUT リクエストでアップロードできるサイズの上限が 5GB まで 単一の HTTP リクエストでアップロードするため、大きなサイズをアップロードしようとしたときに問題が起きる。例えば、アップロードの処理の途中で失敗したとき、最初からやり直しになる。 このようなときに活用したいのが、マルチパートアップロードです。マルチパートアップロードとは、その名の通り、アップロード対象のオブジェクトを小分けにしてアップロードする方法です。 AWS の SDK には、マルチパートアップロードが簡単に行えるような API が用意されているものの、多くは、S3 にアップロードを行うことができる I

[ken39arg]

以前この方法2を採用していたのを作っていたけど(残念ながら現在はクローズ済み)今だったら、こちらの件があるから採用できないかも https://gigazine.net/news/20240502-how-empty-s3-bucket-aws-bill-explode/

[kiririmode]

大容量ファイルのS3アップロードにおける課題として、マルチパートアップロードが効果的。IAMクレデンシャルを利用する方法とPresigned URLによる方法を実装

[toricls]

"Amazon S3 の User Guide ではオブジェクトサイズが100MBに達する場合はマルチパートアップロードを検討した方が良いとされて" 追記: 課金周りの安心更新きてた https://aws.amazon.com/about-aws/whats-new/2024/05/amazon-s3-no-charge-http-error-codes/

[moneyshark]

マルチパートまとまってる。