S3互換のオブジェクトストレージminioを試す | DevelopersIO
はじめに AWSを利用するシステムを開発するときに、まだリソースを用意してないけどちょっと動かしてみたいな、ということが稀によくありますよね。 最近S3を使う機能の開発でそういう状況になったので、S3互換オブジェクトストレージのminioを試してみました。 簡単に動かすことができたので今回は導入方法とaws-cliからの操作方法を紹介します。 検証環境 Docker: 18.06.0-ce minio: 2018-08-02T23:11:36Z aws-cli: 1.16.1 minioとは minioはプライベートクラウドでの利用を想定した分散オブジェクトストレージです。Go言語実装で、ソースはGitHubのリポジトリで確認できます。 GitHub - minio/minio: Minio is an open source object storage server compatibl
AWS CLIを使ってS3上にあるファイル数とファイルサイズの合計を取得する | DevelopersIO
Amazon Athenaの料金はスキャンしたデータ量で決まるので、特定のフォルダ以下のファイルサイズの合計をAWS CLIで取得する方法を調べたのですが忘れそうなのでメモしておきます。以下のコマンドでファイル一覧の後にファイル数とサイズの合計が出力されます。 aws s3 ls s3://[バケット名]/[フォルダ名]/ --recursive --human --sum オプションの説明になります。 --human-readable(--humanだけでも可)：ファイルサイズに単位をつけて見やすくしてくれるオプション --summarize (--sumだけでも可)：合計サイズとオブジェクトの数を表示してくれるオプション --recursive：指定したフォルダの中にフォルダがあった場合にその中のファイルも対象にするオプション バケットごとの使用量やファイル数はCloudWatchで見
【新機能】S3のファイル数とバケットサイズがCloudWatchに追加されました | DevelopersIO
ども、大瀧です。 本日未明にS3の機能追加があり、ファイル数とバケットサイズがCloudWatchに追加されました！もう一つのアップデートであるS3 Event NotificationのDeleteイベント追加は以下のエントリーをご覧ください。 【新機能】S3 Event NotificationにDeleteイベントが追加されました ｜ Developers.IO 従来、S3バケットに保存しているファイルの数やバケットサイズは、個別にS3:Get*のAPIを呼び出して情報を取得する必要があり、特にサイズはファイル1つ1つのプロパティを見る方法しかありませんでした。今回のアップデートにより、AWS標準の監視サービスであるCloudWatchのメトリックス(監視項目)としてファイル数とファイルサイズの合計が取得できるようになりました。 設定方法 既定でS3の下記メトリクスがCloudWat
s3 sync がとても便利 - Qiita
この記事を読んでわかること ローカルのあるディレクトリ内のデータをごっそりS3の指定した場所にアップロードする方法 環境 Windows 前準備 ローカルにAWS Cliをインストールしておく https://aws.amazon.com/jp/cli/ IAM USERを作成する S3へのアクセスを許可するIAMユーザーを作成 シークレットアクセスキーをきちんと書き留めておく { "Version": "2012-10-17", "Statement": [ { "Sid": "Stmt1446117060000", "Effect": "Allow", "Action": [ "s3:GetObject", "s3:ListAllMyBuckets", "s3:ListBucket", "s3:PutObject" ], "Resource": [ "arn:aws:s3:::*" ]
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
How To Use Deja Dup To Backup To Amazon S3
