[新機能]S3で新しいストレージクラス Glacier Deep Archive が使えるようになりました | DevelopersIO
Amazon S3 Pricing ストレージクラスのおさらい ストレージクラスのおさらいです。読み飛ばしても問題ありません。 S3 には、バケットに格納したオブジェクトのユースケースに応じてストレージクラスを選択できます。 ストレージクラスには以下の種類があります。 アクセス頻度の高いオブジェクトのストレージクラス STANDARD デフォルトのストレージクラス REDUCED_REDUNDANCY 低冗長化ストレージクラス それほど重要ではない再生可能なデータを STANDARD より低いレベルの冗長性で保存する コスト効果が良いのは STANDARD とされており、使用は推奨されていない アクセス頻度が高いオブジェクトと低いオブジェクトを自動的に最適化するストレージクラス INTELLIGENT_TIERING アクセス頻度から長時間アクセスされていない場合、オブジェクトを低コストで
![[新機能]S3で新しいストレージクラス Glacier Deep Archive が使えるようになりました | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/a4ba234e91df2706953e10f91057025f194e4d0c/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2018%2F11%2Feyecatch_amazon-s3_1200x630.jpeg)
AWS S3 バケットの解説
AWS S3 バケットが単なるファンシーなクラウドホスト型ネットワーク接続ストレージ（NAS）であったら、このブログももっと短いものになり、苦労はないのですが、残念ながらそうはいきません。AWS S3 バケットは、本来そうあるべきほど「単純」ではないので、このような解説記事が必要になります。 AWS S3 はオブジェクトレベルのストレージサービスです。データの可用性、セキュリティ、スケーラビリティ、およびパフォーマンスに優れています。さらに、GUIとAPIの両方の形式で、充実した管理ツールと管理機能を備えています。第一級のユーザーとして開発者を想定しており、データの作成、複製、さらには消去までの責任がユーザーに委ねられます。では、どのように機能するのでしょうか？従来のNASや他のクラウド SaaS ストレージプロバイダとの違いは何でしょうか？ このブログで、AWS S3 バケットとは何か、
CORS(Cross-Origin Resource Sharing)について整理してみた | DevelopersIO
ブラウザからAmazon S3に直接ファイルをアップロードしたい 先日、Amazon S3にファイルをアップロードするWebアプリを作ろうとして色々調べていたところ、S3にCORSという仕様のクロスドメインアクセスの設定をすることによって、ブラウザから直接S3にアップロードをする方法にたどり着きました。ただ、この方法を使うにあたってはCORSというクロスドメインアクセスの仕様をきちんと理解しておいた方が良さそうでしたので、まずはCORSについて自分なりに整理してみました。 なお、弊社の横田がCORSとS3についての記事を以前書いていますので、S3のCORSサポートに関する概要を知りたい方はそちらをご覧下さい。 CORS(Cross-Origin Resource Sharing)によるクロスドメイン通信の傾向と対策 CORS ブラウザでAjax通信を行う際には、同一生成元ポリシー(Same
[アップデート] 同一リージョン内でS3バケットのレプリケーションが出来るようになりました！ | DevelopersIO
従来はリージョン間でのバケット複製のみでしたが、今回のアップデートで同一リージョン内のバケット複製がサポートされました！ 待望のアップデートがリリースされました！S3 バケットの同一リージョン内でのレプリケーションです！ Amazon S3 introduces Same-Region Replication これまで異なるリージョンのバケットに対して Cross-Region レプリケーション(CRR)を行うことは出来ましたが、同一リージョンのバケットに対しても Same-Region レプリケーション(SRR)が出来るようになりました。 なにが嬉しいのか 従来は異なるリージョンのバケットしかレプリケーションできなかったので、同一リージョン内で複製したい場合には S3 のマネージド機能ではなく、何らかの作り込みでオブジェクトをコピーする必要がありました。（S3 バッチオペレーションもある
![[アップデート] 同一リージョン内でS3バケットのレプリケーションが出来るようになりました！ | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/55e5ee85a70b0b6893eeca79750f0d06a94b8595/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2019%2F05%2Famazon-s3.png)
Amazon S3の暗号化について調べてみた。 | DevelopersIO
こんにちは、イムチェジョンです。 今回のブログではAmazon S3の暗号化について調べてS3で提供してくれる二つの暗号化を実際にしてみようと思います。 アジェンダ Amazon S3の暗号化とは？ Amazon S3の暗号化４種類 SSE-S3の設定方法 SSE-KMSの設定方法 まとめ 1. Amazon S3の暗号化とは？ 暗号化を使用することで転送時と保管時にデータをもっと安全に保護できる 転送時：Amazon S3 との間でデータを送受信するとき 保管時：Amazon S3 データセンター内のディスクに格納されているとき 大きくサーバー側の暗号化とクライアント側の暗号化に分けている サーバー側の暗号化：SSE-S3、SSE-KMS、SSE-C データセンターのディスクに保存する前にオブジェクトを暗号化し、オブジェクトをダウンロードする際に解読するようAmazon S3に要請 クラ
CloudTrail S3オブジェクトレベルログ、S3サーバーアクセスログ、どちらを使えば良いか？違いをまとめてみた | DevelopersIO
CloudTrail S3オブジェクトレベルログ、S3サーバーアクセスログ、どちらを使えば良いか？違いをまとめてみた CloudTrail データイベントのオブジェクトレベルのログ記録 | AWSドキュメント S3サーバーアクセスのログ記録 | AWSドキュメント 上記2つは両方とも S3オブジェクトに対しての操作を記録する 機能です。 「S3のログ記録機能」としては同じです。 どちらを使えばいいか、迷うことあると思います。 両者の違い、使い分けを整理してみました。 (以降 「CloudTrail データイベントのオブジェクトレベルのログ記録」を CloudTrail S3ログ 、 「S3サーバーアクセスのログ記録」を S3サーバーログ と呼びます) まとめ まずはじめに、まとめを載せます。 より安価なのは S3サーバーログ です。監査の参考やアクセスログ分析のために、まず検討しましょう
【小ネタ】S3サーバーアクセスログを有効化しているのにいつまで経ってもログが格納されない！！もしかしたら暗号化が影響しているかも - サーバーワークスエンジニアブログ
突然ですが、S3のサーバーアクセスログを有効化にしていますか？ docs.aws.amazon.com 設定も簡単、CloudTrailより安価、ということで、とりあえず有効化しているという方もいるのではないでしょうか。 ちなみに有効化している皆さん、S3のサーバーアクセスログを有効にしているのに、なかなかログが格納されないって経験ありませんか？ アクセスログをすぐ確認したい！！って気持ちになりますが、S3サーバーアクセスログは数時間以内のベストエフォートでログの格納先として指定したバケット（ターゲットバケット）に格納されます。 なので、Athena等でS3のアクセスログを確認したい場合は、数時間置いてから、実施するのが良いです。 数時間かかってしまうのは知ってるけど...数時間経っても、1日経ってもアクセスログが格納されない... そんな時は、ターゲットバケットの暗号化の設定を確認してみ
Athena で Amazon S3 サーバーのアクセスログを分析する
解決策 Amazon S3 では、サーバーアクセスログがオブジェクトとしてS3 バケットに保存されます。Athena でサーバーアクセスログを分析し、S3 クエリを行うには、次の手順に従います。 有効になっていなければ、S3 バケットのサーバーアクセスログ記録を有効にします。[ターゲットバケット] と **[ターゲットプレフィックス]**の値を書き留めておきます。Athena クエリで Amazon S3 の場所を指定するには、両方が必要です。 注: ログオブジェクトキー形式では、日付ベースのパーティション化を選択して、分析アプリケーションとクエリアプリケーションを高速化します。 Amazon Athena コンソールを開きます。 注: 最初のクエリを実行する前に、場合によっては、Amazon S3 にクエリ結果の場所を設定します。 [クエリエディタ] で、DDL ステートメントを実行して
[Storage Gateway] Windows で S3 オブジェクト保存！ファイルゲートウェイで SMB プロトコルがサポートされました | DevelopersIO
こんにちは、菊池です。 本日、Storage Gatewayの機能アップデートにより、ファイルゲートウェイでSMB（サーバーメッセージブロック）がサポートされました！ AWS Storage Gateway Adds SMB Support to Store and Access Objects in Amazon S3 Buckets これまで、Storage Gateway経由でS3にオブジェクトを保存できる、ファイルゲートウェイではNFSのみがサポートされていました。 [新機能]オンプレミスからNFS経由でS3オブジェクトを保管できるようになりました！[Storage Gateway] #reinvent 今回、SMB（サーバーメッセージブロック）がサポートされたことで、Windows標準のファイル共有プロトコルによるアクセスが可能になります。 新規のゲートウェイを作成することで、W
![[Storage Gateway] Windows で S3 オブジェクト保存！ファイルゲートウェイで SMB プロトコルがサポートされました | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/5cef8c014e947c6d69a900c17c28496da9c46366/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F05%2FAWS_Storage_Gateway.png)
Amazon Relational Database Service (RDS) スナップショットの S3 へのエクスポートを発表
Amazon Relational Database Service (Amazon RDS) または Amazon Aurora のスナップショットを、分析用の効率的なオープンカラムナーストレージ形式である Apache Parquet として Amazon S3 にエクスポートできるようになりました。Parquet 形式は、テキスト形式と比較して、エクスポートが最大 2 倍速く、Amazon S3 でのストレージ使用量が最大 6 倍少なくすみます。エクスポートしたデータは、Amazon Athena、Amazon EMR、Amazon SageMaker などの他の AWS のサービスを使用して分析できます。 Amazon RDS マネジメントコンソールで数回クリックするだけで、あるいは AWS SDK または CLI を使用してエクスポートを行うことができます。エクスポート操作はデー
Introducing Amazon S3 Storage Lens – Organization-wide Visibility Into Object Storage | Amazon Web Services
AWS News Blog Introducing Amazon S3 Storage Lens – Organization-wide Visibility Into Object Storage When starting out in the cloud, a customer’s storage requirements might consist of a handful of S3 buckets, but as they grow, migrate more applications and realize the power of the cloud, things can become more complicated. A customer may have tens or even hundreds of accounts and have multiple S3 b
Amazon S3 Object Ownership が利用可能になり、バケットにアップロードされたオブジェクトの所有権をバケット所有者が自動的に引き受けることが可能に
Amazon S3 Object Ownership は、バケット所有者が他の AWS アカウントによってバケットにアップロードされたオブジェクトの所有権を自動的に引き受けることを可能にする新しい S3 機能です。これにより、バケット内の新しいオブジェクトの所有権を標準化し、バケットポリシーやアクセスポイントポリシーなどのリソースベースのポリシーを介して、これらのオブジェクトへのアクセスを大規模に共有および管理できます。S3 バケットが他の AWS アカウントからデータを受信する場合でも、AWS CloudTrail などの AWS のサービスからの出力を保存する場合でも、S3 Object Ownership は、Amazon S3 で共有データセットを作成および維持する作業を簡素化します。 デフォルトでは、S3 オブジェクトは、オブジェクトをアップロードした AWS アカウントによって
AWS DataSync エージェントを EC2 インスタンスにデプロイしてパブリックと VPC Endpoint それぞれでアクティブ化してみた | DevelopersIO
AWS DataSync エージェントを EC2 インスタンスにデプロイしてパブリックと VPC Endpoint それぞれでアクティブ化してみた コンバンハ、千葉（幸）です。 AWS DataSync は、各種ストレージサービス間でのデータ転送をシンプルかつ高速に実現してくれるサービスです。 S3 や EFS などの AWS 上のサービスや、オンプレで稼働している NFS 、 SMB ストレージ などをロケーションとして定義し、それらを送信先/宛先として組み合わせることで、データ転送が実現できます。 各ロケーションには AWS DataSync エージェント が接続し、データ転送を中継します。エージェントは AWS 上、オンプレ上どちらでも構成することが可能です。 今回は AWS 上の EC2 インスタンスで稼働させる方式でセットアップし、アクティブ化が成功するところまでを試してみます。
Amazon S3 バケットアクセスを特定の IP または VPC に制限する
特定の Amazon 仮想プライベートクラウド (VPC) エンドポイントまたは特定の IP アドレスから送信されていないトラフィックをすべてブロックしたいと考えています。または、Amazon Simple Storage Service (Amazon S3) バケットを使用して静的ウェブサイトをホストしています。ウェブサイトには、特定の VPC エンドポイントまたは IP アドレスからアクセスできる必要があります。 解決策 **警告:**この記事のバケットポリシーの例では、許可された VPC エンドポイントまたは IP アドレス以外のリクエストに対して明示的にアクセスを拒否します。バケットポリシーを保存するときは、事前に、内容をよく確認してください。 バケットポリシーを使用して、S3 バケットにアクセスできる VPC エンドポイント、VPC ソース IP アドレス、または外部 IP ア
Amazon S3 Transfer Acceleration を使用した高速かつ安全なファイル転送の設定 - Amazon Simple Storage Service
Amazon S3 Transfer Acceleration は、クライアントと S3 バケットの間で長距離にわたるファイル転送を高速、簡単、安全に行えるようにするバケットレベルの機能です。Transfer Acceleration は、世界各地から S3 バケットへの転送速度を最適化するように設計されています。Transfer Acceleration は、Amazon CloudFront の世界中に点在するエッジロケーションを利用します。エッジロケーションに到着したデータは、最適化されたネットワークパスで Amazon S3 にルーティングされます。 Transfer Acceleration を使用する場合、追加のデータ転送料金が発生することがあります。料金に関する詳細については、「Amazon S3 の料金」を参照してください。 なぜ Transfer acceleration
【Ask SA!】現場のデバイスからAmazon S3のVPC エンドポイントへ閉域アクセスする方法 - SORACOM公式ブログ
こんにちわ。ソリューションアーキテクトのyskです。 ソラコムのソリューションアーキテクトおよびプロフェッショナルサービスコンサルタントがSORACOMを活用する技術情報をお届けするAsk SAシリーズの第二弾です。 この記事では現場のデータをSORACOM Airを利用して閉域網内でAmazon S3(以下S3)にアップロードする方法についてご紹介します。 Amazon S3はAmazon Web Service（以下AWS）のオブジェクトストレージサービスで、IoTのワークロードにおいてもデータ収集ストレージや外部との連携ハブとして多く活用される便利なサービスです。 IoTでは現場とクラウド間のデータ通信を閉域網内に閉じたいと相談をいただくケースも多く、S3へのアクセスもエンドツーエンドの閉域網内で実現する方法が求められる場合があります。（※この文脈での閉域網とは通信の途中経路でネット
Amazon S3 セキュリティベストプラクティスの実践（権限管理のポリシー) – 前編 | Amazon Web Services
Amazon Web Services ブログ Amazon S3 セキュリティベストプラクティスの実践（権限管理のポリシー) – 前編 はじめに AWS では、サービス毎にセキュリティのベストプラクティスを公式ドキュメントとして提供しています。本記事では AWS を利用したシステムのセキュリティの検討や実装に関わる皆様を対象に、AWS の代表的なストレージサービスである Amazon Simple Storage Service (S3) を題材にとりあげて、公式ドキュメントで紹介しているベストプラクティスの実装方法をできるだけ具体的に解説したいと思います。 IT セキュリティにおいては、一つの脆弱性や悪意がセキュリティ事故に直結しないようにシステムを多層的に保護する事が重要です。AWS においても、サービスが提供する機能を適所でご利用いただければ多層化されたセキュリティ保護策を、クラウ
【新機能】CloudTrailでS3オブジェクトレベルのアクセスをロギングする | DevelopersIO
こんにちは、虎塚です。 先日のAWSアップデートによって、CloudTrailでS3オブジェクトレベルのロギングができるようになりましたので、ご紹介します。 これまでもS3バケットレベルでの操作はCloudTrailで記録できましたが、オブジェクトへのアクセスのロギングはサポートされていませんでした。 今回のアップデートで、S3オブジェクトのPutやDeleteといった操作がCloudTailで追跡、記録できるようになりました。 S3オブジェクトレベルのロギングの概要 今回のアップデートに伴い、CloudTrailにイベントセレクタという新しい概念が登場しました。次の流れでイベントを捕捉し、ロギングします。 アカウント内でなんらかのイベントが起きる CloudTrailが全trailでイベントセレクタを評価する 各trailは、イベントセレクタの設定にしたがってロギングする (S3バケット
AWS WAFのログをFirehoseでS3に出力しブロックログをS3Selectで確認してみた | DevelopersIO
AWS WAF 包括ログ出力がサポートされたので、WAFのログをFirehose経由でS3に出力、ログの内容についてS3 Selectで確認してみました。 はじめに AWSチームのすずきです。 AWS WAF のアップデートにより、リクエストされたHTTPヘッダーと関連するWAFルール情報が含まれるアクセスログを Amazon Kinesis Data Firehose を利用し S3などに出力する事が可能になりました。 早速、リリースされたAWS WAF の包括的なログ記録機能と、出力されたログをS3 Selectを利用して確認する機会がありましたので、紹介させていただきます。 AWS WAF の包括的なログ記録機能が新たに利用可能に Firehose設定 AWS WAFのログ出力先となる Amazon Kinesis Data Firehoseと、ログ保管場所として利用するS3バケット
【注意喚起】 2020年9月30日以降、パス形式での S3 API リクエストは受け付けられなくなります。 | DevelopersIO
2020年9月30日以降、パス形式での S3 API リクエストは受け付けられなくなる、との発表がありましたのでシェアします。 Announcement: Amazon S3 will no longer support path-style API requests starting September 30th, 2020 2021.01.27 追記 2020年9月23日に以下の追加アナウンスがありました。 ・ユーザーが仮想ホスト形式への移行に必要な時間を確保するための措置として、パス形式の非推奨化は少なくとも 1 年間延期されました。執筆時点において新規バケットについてもパス形式のリクエストは可能ですが、あくまで延期であるため新規に作成されるものについては、仮想ホスト形式を前提にしたほうが良い点は変わらないと思います。 ・また、互換性の理由から仮想ホスト形式においてもドットが含まれる
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
