マネコン起動もできるAWSのスイッチロール用CLIツール「AWSume」の紹介 | DevelopersIO
プロファイル指定したマネジメントコンソールの起動までできる、コマンドラインツールです。全AWSユーザーが求めていたのはこれなんじゃないでしょうか。どすこい。 「スイッチロールからの作業、AWSのベストプラクティスだけれどツールの設定がめんどくさいよね」 ハマコー、最近会社のパソコンをIntel MacからM1 Macに切替たことがきっかけで、いろんなツールを再度セットアップしてました。 普段AWS触っている身としてはスイッチロールして作業する環境も必須なので、改めて最新ツールを物色していたところ、弊社技術番長の岩田御大に教えてもらったAWSumeというツールが圧倒的に便利だったので、前のめりに紹介します。 標準公式のconfigとcredentialファイルのみで動作し、別途設定ファイルは不要 コマンドラインから、プロファイル名の自動補完に対応 指定したプロファイルから、マネジメントコンソ
AWS CLI S3 Configurationを試したら想定以上にaws s3 syncが速くなった話 | DevelopersIO
設定方法は、公式ドキュメントの通りですが、~/.aws/configに直接記載するか、aws configure setコマンドを利用して設定します。 $ cat ~/.aws/config [profile default] s3 = max_concurrent_requests = 20 max_queue_size = 10000 $ aws configure set default.s3.max_concurrent_requests 20 $ aws configure get default.s3.max_concurrent_requests 20 $ aws configure set default.s3.max_queue_size 10000 $ aws configure get default.s3.max_queue_size 10000 AWS CLI S
AWS CLI S3コマンドの並列処理設定 - Qiita
概要 aws s3コマンドの並列転送処理、マルチパートの処理を設定でコントロールできるようになった。 S3コマンドの自動並列処理 AWS CLIでは、aws s3から始まる高レベルのコマンドがあり、S3のオブジェクトの操作が便利になっています。 http://docs.aws.amazon.com/cli/latest/reference/s3/index.html この中では、ワイルドカードを指定する、もしくはsyncコマンドで、複数ファイル処理が行えます。 これらは並列で転送処理が行われるのですが、これ以外にも、アップロードする1つのファイルが大きい場合は、内部的にマルチパートに分割され、Multipart Uploadが行われています。 (--debugで動作を確認できます) 並列処理を行うことで、スループットを向上させることができる、またマルチパートの場合は、それに加えて、単一のフ
AWS CLIで使える認証情報とオプションの設定方法まとめ | DevelopersIO
西澤です。AWS CLIで複数環境を操作していると、今使っている認証情報が一体何だったのかわからなくなってしまうことはないでしょうか？当たり前のように使いこなしている方も多いのかもしれませんが、情報整理も兼ねて、AWS CLIで利用できる認証情報と一般オプションの設定方法について整理してみたいと思います。 AWS コマンドラインインターフェイス | AWS AWS CLIで利用する認証情報とオプション 今回話題にするのは、AWS CLIで利用する認証情報の設定方法がメインです。具体的には、下記の3つです。 認証情報の要素 access_key secret_key token(一時認証を利用の場合のみ) 合わせて関連する下記の一般オプションも、同時に確認することが可能です。 一般オプションの要素 profile region output これら合計6つの要素の設定方法とその確認方法を以下
AWSのイベントを取得してメールでお知らせするshell script - Qiita
AWSがインスタンス(EC2,RDS)に対して予定・実施する特定のメンテナンスイベント(再起動やリタイヤなど)をAWS CLIで取得してメール発報をするshell scriptを作成しました。 既に同様のスクリプトは多々有ると思いますが、折角ですので公開します。 どなたかの参考にでもなれば幸いです。 ※2015/10/15 にRDSのメンテナンスイベントも取得するように修正しました 【参考ドキュメント】 「AWS CLIのフィルターとクエリーの使い方についてまとめてみた」 http://dev.classmethod.jp/cloud/awscli-enhanced-query-opt-snipets/ 「【速報】Amazon RDS：メンテナンスへの柔軟な対応が可能に（pending-maintenance）」 http://dev.classmethod.jp/cloud/aws/rd
aws-cliの標準出力をjqで整形 - Qiita
$ aws ec2 describe-instances { "Reservations": [ { "OwnerId": "xxxxxxxxxxx", "ReservationId": "r-xxxxxxx", "Groups": [], "Instances": [ { "Monitoring": { "State": "disabled" }, "PublicDnsName": "", "State": { "Code": 16, "Name": "running" }, ・ ・ ・ "Architecture": "x86_64", "RootDeviceType": "ebs", "RootDeviceName": "/dev/xvda", "VirtualizationType": "hvm", "Tags": [ { "Value": "example.com", "Key"
AWS re:Invent 2016: The Effective AWS CLI User (DEV402)
Understanding the internals of the AWS CLI will make you a more effective user. This talk provides a deep dive into the architecture, debugging techniques, advanced usage patterns, and some of its more advanced features. We recommend this talk for people who are already familiar with the AWS CLI because the topics will be advanced. By the end of the talk, audience members will have a deeper unders
aws-cli で使える --query = jmespath をガッツリ使い込む - 続 カッコの付け方
すでに結構色んな所で取り上げられている aws-cli の --queryですが、使ってみました。 とりあえずこれ試してみよう！ JMESPath Tutorial — JMESPath これを紹介だけで、このエントリの90%の価値が含まれております。騙されたと思ってやってみて。ぜひ 能書き xpathってご存知？要は、xmlに対するクエリ言語のようなもので、xmlの構成に合わせてxpathを指定することにより、狙った特定の要素だけを引っ張り出したり、加工したりできます。最近の人はxmlは嫌いらしいですが、まあ、json も xmlの冗長部分を削いだものなので同じことがjsonに対してもできるってことですね。これがjmespathのはず、名前の付け方からして。ちなみに私はxpathで一発クエリで超複雑なxmlから、特定要素をスコンと狙い撃ちする感覚が大好き、快感です。 jmespathです
続 カッコの付け方
BigQuery(BQ)のスケジュールドクエリは、普通に設定すると設定したユーザー、つまり人の権限で実行されます。 これを読んでる人は何が問題かわかっているはずで、退職時にそのユーザーアカウントが消滅すると動かなくなる、だけでは済まずに設定自体が消滅します。それを避けたいのでサービスアカウント(SA)で実行したい、ただそれだけの話だけど間違った手順が広まってしまっている。 まず最初に、SAの鍵は不要です。SAでスケジュールドをやるには鍵が必須かのような認識は、今すぐ捨ててください。 参考にすべきところ https://cloud.google.com/bigquery/docs/scheduling-queries?hl=ja#using_a_service_account Googleの公式をしっかり読むのが結局の近道です。信頼に足る情報源としてはここが一番 コンソールから設定する De
JMESPath チュートリアル | DevelopersIO
渡辺です。 AWSCLIのqueryオプションで利用できるJMESPathですが、導入部分の敷居は低いのですが、使いこなそうとするとなかなか難解な仕様な気がします。 そこで、複雑なqueryも書けるように、チュートリアルを紹介します。 JMESPathとは JMESPathはJSONのクエリ言語です。 ひらたく言えば、JMESPathを利用することで、JSONを対象としてフィルターや抽出を行い結果を取得できます。 jqが近いツールですが、jqはコマンド（ツール）であり、JMESPathはクエリ言語という点が相違点です。 JMESPathは、AWS CLI (v1.2以降）で利用できるため、結果となるJSONオブジェクトを加工するのに便利です（AWS CLIのフィルターとクエリーの使い方についてまとめてみた）。 基本書式 最もシンプルな書式は identifier（識別子）です。 JSONオ
JMESPath Tutorial — JMESPath
JMESPath Tutorial¶ This is a tutorial of the JMESPath language. JMESPath is a query language for JSON. You can extract and transform elements from a JSON document. The examples below are interactive. You can change the JMESPath expressions and see the results update automatically. For each of these examples, the JMESPath expression is applied to the input JSON on the left, and the result of evalut
[小ネタ] セキュリティグループ毎に関連付いたEC2インスタンスの一覧を表示する | DevelopersIO
はじめに 小ネタです。AWS管理コンソールでは「各EC2インスタンスがどのセキュリティグループに関連付いているか」を確認することは出来ますが、「各セキュリティグループにどのEC2インスタンスが関連付いているか」は見ることができません。これはちょっと不便です。なのでAWS CLIを使ってサクッと確認してみました。 やってみた AWS CLIを使ったシェルスクリプトはこんな感じです。 $ vi get_secg.sh declare -a SECG=$(aws ec2 describe-security-groups | jq '.SecurityGroups[].GroupName') for secg in ${SECG[@]}; do echo "*** SecurityGroupName: "$secg" ***" aws ec2 describe-instances | jq -r
![[小ネタ] セキュリティグループ毎に関連付いたEC2インスタンスの一覧を表示する | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/9e4fef1591ede28ae629d3a4e5c38d7525760c0c/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F05%2Faws_icon-awscli.png){kind=icon}
AWS CLIでよく使いそうなコマンド – OpenGroove
「よく使いそうな」と言っても、当然自分基準。ちなみにjqは使ってない。--filtersと--queryがあればjqいらないんじゃないかと思い始めた。 ec2インスタンスの操作 インスタンスのステータス取得。--output textオプション付与すると純粋に値のみ取得可能。 $ aws ec2 describe-instances ¥ --instance-ids i-xxxxxxxx ¥ --query 'Reservations[].Instances[].[State.Name]' 特定のNameタグを持つインスタンスのインスタンスIDを取得。 describe-instancesでOKだがdescribe-tagsからでも可。 describe-tagsで取得。 $ aws ec2 describe-tags \ --filters "Name=tag:Name, Values=
describe-instances — AWS CLI 1.33.22 Command Reference
describe-instances [--filters <value>] [--instance-ids <value>] [--dry-run | --no-dry-run] [--cli-input-json <value>] [--starting-token <value>] [--page-size <value>] [--max-items <value>] [--generate-cli-skeleton <value>] [--debug] [--endpoint-url <value>] [--no-verify-ssl] [--no-paginate] [--output <value>] [--query <value>] [--profile <value>] [--region <value>] [--version <value>] [--color <va
AWS CLIで名前検索等 - シンプライン（Simpline）公式採用サイト‐採用情報
2015/05/08 AWSを少し使うとIDだらけになってしまうので、Nameタグ付けにはこだわりをもって対応してるのだけど、関連リソースを紐付けて管理する良い方法が未だに見出せていない。棚卸や削除漏れ抑止の為に部分一致で検索する為のスクリプトを作ったので、そのパーツを覚書として。 EC2のNameタグで部分一致検索 前回も書いたけど、これは”–filters”をアスタリスク指定で取った方が全然簡単。JMESPathの関数の多くは、valueの型を意識して動くようなので、string以外（この場合はnull）が混ざっていると想定通りの検索ができない。なので、not_nullを使ってNameタグが空で無いもののみを検索対象としている。一応結果の出力は、IDと名前を横並びでテキスト形式で表示させるところも以降全て揃えてみた。 KEYWORD=hogehoge aws ec2 describe-
AWS CLIカンファレンス2016に参加してきた | DevelopersIO
西澤です。日頃お世話になっているJAWS-UG CLI専門支部が主催するAWS CLIカンファレンス2016(AWS CLIを冠するカンファレンスは世界初とのこと)に参加してきましたので、ちょっと雑なメモもありますがレポートさせていただこうと思います。 実行委員会に名前だけありますが、ほとんど手伝えませんでした。申し訳ありません。 AWS CLI カンファレンス 2016 - JAWS-UG CLI専門支部 | Doorkeeper 13:40 - 基調講演 (AWSJ酒徳さん、小梁川さん) AWS CLIの基本的な考え方から開発時のTips、運用での活用事例をご紹介いただきました。知らなかったツールや手法もご紹介いただいたので、改めて試してみたいと思います。 AWS CLIの基本(AWSJ酒徳さん) 2013年から9月からあるサービス aws configure Query HTTPレス
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
awscliのquery結果をソートする | クロジカ
AWS Command Line Interface からのコマンド出力の制御 - AWS Command Line Interface
AWS CLI Conference 2016
AWS CLI の query による絞り込み - Qiita
