こんにちは。インフラチームの倉橋です。 先日、S3間での大量オブジェクトコピーを AWS DataSync を用いて実施しました。 それはそれは素晴らしい体験でしたので共有したく記事にしました。 なにがしたかったか S3バケット間コピー方法の決定 AWS DataSync とは AWS DataSync 料金 AWS DataSync を使用してバケット間コピーを実現 1. IAMロール作成 2. コピー元バケットのLocationを作成 3. コピー先バケットのLocationを作成 4. タスクを作成 5. タスク実行 AWS DataSyncを使ってみて なにがしたかったか S3に保存されている「約300GB」のオブジェクトを同一アカウント / 同一リージョン の別S3バケットにコピーしたい。 それだけです。 とはいえ「約300GB」です。舐めてかかっては痛い目に合うかもしれません。