AWS CLIをインストールしてコマンド操作しよう - Avinton Japan
AWS CLIは、AWSのサービスをコマンドラインから操作し、管理するためのツールです。 このツールはプラットフォームや開発言語の制限がなく、Linux、Mac、Windowsなど様々なOSで利用できます。 シェルスクリプトのようなプログラミング言語と組み合わせることで、AWSの作業を自動化できる点は非常に魅力的です。 ここからは3回に記事を分け、AWS CLIとS3、LinuxのCrontabを用いて、Webサーバー（Dockerのコンテナ）を自動でバックアップするシステムを作っていきます。 AWS CLIを使う理由 AWS CLIを使う１番のメリットは、 GUIで行なっていた操作を自動化できる 点です。 ↓こちらの記事では、AWSの画面をみながらボタンをぽちぽちしてインフラを構築しました。 AmazonEC2とVPCでネットワークとサーバーを構築しよう GUIでの操作は気軽ですが、
【Tips】AWS CLIを使ってAmazon EC2を起動・停止するワンライナーまとめ | DevelopersIO
こんにちは、城内です。 スマホゲームが大好きなのですが、最近はめっきりファンキル *1にハマっています。Fate *2コラボに惹かれて参戦したのですが、直近では結構インパクトのあるCMを打っていたり、過去のコラボもあの花 *3とかまどマギ *4とか、自分的にはかなりのツボですね！ さて、個人的な趣味の話と無駄な脚注は置いておいて、今回もちょいネタです。 EC2を起動したり停止したりする、AWS CLIを使ったワンライナーをいろいろ紹介したいと思います。 目次 1. EC2起動 1-1. 単体起動 1-2. 起動確認 1-3. 起動待ち 1-4. 全起動 2. EC2停止 2-1. 単体停止 2-2. 停止確認 2-3. 停止待ち 2-4. 全停止 ワンライナーまとめ では、さっそくつらつらとまとめを書きます。 ちなみに、私はAWS CLIやjqのマスターではありませんので、「それ最適じゃな
CentOS7の最新AMI IDをAWS CLIで取得する方法 | DevelopersIO
CentOS7の最新AMI IDを調べようと思っても意外と見つからない、という経験はありませんか？自分はあります。CentOSの最新AMI IDを取得する方法を調べたのでご紹介したいと思います。 最新AMI IDの取得方法 Cloud/AWS - CentOS Wiki 上記が公式のWikiですが、メンテされていないようで最新のAMI IDの記載がありませんでした。しかし、AWS CLIで検索する際にヒントとなる情報がありました。product-codeをfilter条件に入れることで公式のAMIだけを抽出できるようです。各OSのProduct Codeは下記になります。 OS Product Code Wikiで紹介されているのが、CentOS7のAMIを検索する方法です。 $ aws --region us-east-1 ec2 describe-images --owners aws
[小ネタ] S3に保存されているログファイルをAWS CLIでまとめてコピーする | DevelopersIO
はじめに 清水です。ELBやCloudFront、S3などのアクセスログはS3に保存されます。 アクセスログは外部ツールと連携させて監視や可視化するということもあると思いますが、直接ログファイルを確認することも多いのではないでしょうか。 ログファイルを直接確認するときはS3から作業用マシンにファイルをコピーしますが、保存先のS3バケット内のPrefixで指定したディレクトリにファイルが大量にあることが多いことから、私はAWS CLIを使ってコピーすることが多いです。 AWS CLIの場合、UNIXとまったく同じ書式でワイルドカードを使用することはできませんが、--recursiveオプションと--excludeオプション、--incluceオプションを組み合わせることで同様のことができます。 今回はアクセスログファイルから特定の日付のファイルだけを作業用マシン（AWS CLIを実行している
![[小ネタ] S3に保存されているログファイルをAWS CLIでまとめてコピーする | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/0eb469bfaff8e33e9f250bdad40fd2ee2aba555c/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2016%2F09%2Faws-cli.png)
AWS LambdaでPHPを動かしてRDS(MySQL)へ接続する - Qiita
以前は、LambdaからRDSへ接続するには、RDSをパブリックアクセス可能に設定し、LambdaのIPアドレスを通すようなセキュリティグループの設定も必要でした。 しかし、LambdaからVPCアクセスが可能となった今、スマートかつセキュアに接続をすることができます。 LAMP環境を作る AWS LambdaのVPC対応によって、LAMP環境の構築が容易になりました。 LAMP環境とは、LAmbda, MySQL, PHP で構成されるアプリケーションの実行環境のことです。 (Python?知らない子ですね) AWS Lambdaで動かすPHP AWS LambdaにはPHPが入っていません。 なので、PHPを動かすためには、Node.jsなどのAWS Lambdaでサポートされている言語経由で、自分で用意したPHPの実行ファイルを起動する必要があります。 AWS LambdaでPHPを
S3にて Pre-Signed URLを発行する - サーバーワークスエンジニアブログ
こんにちは。高橋@技術4課です。 小ネタです。S3にて Pre-Signed URL（署名付きURL）発行する方法をご紹介します。 Pre-Signed URLを利用することで、普段は公開していないS3のファイルを、一定期間だけ公開することができます。 S3の権限はそのままに URL を発行でき、かつ Pre-Signed URLを知っている人にだけアクセスが可能にできます。そのため「特定の人に特定の時間だけファイルを配布したい」といった時に使えるかと思います。 例）セミナーのアンケート配布 などなど Pre-Signed URLは、AWS CLI と SDK から発行できます。 CLI 以下のコマンドを実行することで、Pre-Signed URLが発行できます。 $ aws s3 presign s3://bucket_name/object_name --expires-in seco
AWS CLI S3を使ってみたら最高に便利だった - ECのウェブ担当者のメモ
ウェブ担用の記事かどうかわかりませんが、 ウェブ担であろうとだれであろうと、便利な物は便利で AWSのS3を使っているなら、是非、コマンドラインツール AWS CLIを使うことも検討してもらいたいです。 何が便利なのか？ AWS CLI S3の何が便利なのかといえば、ファイル系の操作が格段に早くなります。 特にコピー。 原因としては、S3用の無料で使えるクライアンツールが無いのがいけないんだと思います。 唯一、Cyberduck が使えるけど、ファイル数が増えてくると、動きが遅くなって、 あまり使い物にならなくなってしまいます。 Cyberduck | Libre FTP, SFTP, WebDAV, S3 & OpenStack Swift browser for Mac and Windows だから、AWS CLI が便利に感じるんです。 AWS CLI のインストール 公式のドキュ
AWSのCLIは標準出力ではなく標準エラー出力を使っている | レコチョクのエンジニアブログ
最近 Run Command を利用してAWSのCLIのバージョンを上げる作業をしました。 そのときにCLIの出力が思った通りに動作しなかった為、書きたいと思います. Run Command の実行 Run Commandではじめに実行したスクリプト以下の内容です。
(レポート) DEV301: AWS CLIによる自動化 #reinvent | DevelopersIO
渡辺です。 みんな大好きAWS CLIのセッション資料「(DEV301) Automating AWS with the AWS CLI」を読んでみました。 [slideshare id=53748614&doc=dev301-151009173049-lva1-app6892] AWS CLI AWS CLI（Command Line Interface）は、Amazon Linuxでは標準でインストールされているAWSの各種サービスを操作することの出来るコマンドです（他のOSはインストーラなどが提供されている）。 コマンド単体ではインタラクティブにひとつの操作しかできませんが、シェルスクリプトを作成することでかなりの作業を自動化することができます。 シェルスクリプトと親和性が高いため、簡単なタスクであればシェルスクリプトとして作成し、cronなどで運用すると便利です。 良いシェルスクリ
AWS CLI のprofileを簡単に切り替える - tail my trail
意外と知らない人がちらほらいたので、書き留めておく。 AWSとAPIとIAMについて 基本的にAWSの全てのサービス / リソースの操作はAPIによって行われます。 (Management Consoleの操作も内部的には全て同じAPIアクセス) S3への画像のuploadから、EC2 Instanceの増設/設定変更から、CloudWatchの参照、Support Caseの起票まで、あらゆる操作をAPIで行うことができるので、 単純なWeb Applicationだけでなく、オペレーション自動化など多種多様な用途で活用することになり、IAM User/Access Keyもあわせて複数用意することが多いと思います。 環境やサービスによってAWSのアカウント自体を分ける運用も多いと思いますが、そうなると扱うKeyの数は益々増えていきます。 AWS CLI 何かAWSのリソースを使ってもの
AWS CLIの認証設定をする際の注意 - Qiita
AWS Access Key ID [None]: xxxxxxxxxx AWS Secret Access Key [None]: xxxxxxxxxx Default region name [None]: ap-northeast-1 Default output format [None]: json AWS Access Key ID [None] と AWS Secret Access Key [None] には発行したアクセスキーを， Default region name [None] にはデフォルトリージョンを， Default output format [None] にはコマンド出力結果の表示形式（json,table,textのうちどれか）を，それぞれ指定します． これで設定は終了です． 何がよくないか 上のコマンドによって~/.aws ディレクトリに作成された，認
Amazon S3にGUI･CLIでファイルをアップロード・ダウンロードする方法 | DevelopersIO
おはようございます､加藤です｡ 今回は､Amazon S3バケットにGUI(Amazonマネジメントコンソール)､CLI(AWS CLI)それぞれでファイルをアップロード・ダウンロードする方法をまとめてみました｡ S3バケット作成 動作検証を行うために､プライベートなバケットを作成します｡ バケット名は｢sample-bucket-[任意文字列]｣としました｡ 以降はデフォルトのまま進めるだけです｡ GUI: Amazon マネジメントコンソール(AMC)からの操作 GUIを使った操作方法を説明します｡ 下記URLにアクセスして操作します｡ S3 Management Console アップロード 早速アップロードを試してみましょう｡ ファイルをアップロードしたいバケット名をクリックする｡ 概要タブを選択し､アップロードをクリックする｡ ファイルを追加をクリックする｡ ファイルが追加されて
AWS CLIのCredentialの設定に嵌ったお話 | DevelopersIO
本日、東京から札幌へ戻る横山です。 AWS CLI使えるようになるまでのメモです。 前提 aws-cliを使うためのCredentialが設定されていないEC2がある。 $ aws ec2 describe-availability-zones Unable to locate credentials. You can configure credentials by running "aws configure". $ aws --version aws-cli/1.5.0 Python/2.6.9 Linux/3.14.20-20.44.amzn1.x86_64 準備 今回はIAMユーザ作り、access keyを作るところから始めていきます。 IAMのUsers画面を開き、Create New Usersからユーザを作っていきます。 次に、適当なユーザ名をつけて、Access Key
オンプレ環境からS3へのファイル転送方式についてこれまで試したパターンまとめ | DevelopersIO
西澤です。AWS上にシステムを移行する上で、毎度のようにご相談を受けるのが、S3へのファイル転送をどうするか？という問題です。ビッグデータの元となる大量のファイル、RDBのダンプファイル、その他のバックアップファイル等を含め、安価で堅牢なS3にまずはデータを格納し、そこから自由に利用したいというユーザの希望を実現する為に、まずは何よりもS3にファイルを持っていかなければなりません。 今回は、過去のブログも遡りつつ、これまで試してみた各種転送方式をご紹介し、それぞれのユースケースを整理しておこうと思います。また、この記事は書きっぱなしにするのではなく、今後必要に応じてメンテナンスもすることで、再利用できるような記事に育てていきたいなと思っています（執筆時点での意気込みであり、何かを保証するものではありません）。 前提 Amazon Kinesis Streamsを利用するようなリアルタイム処
Amazon S3バケットへのファイルアップロードを実現する – 01.概要&GUIお勧めツール編 | DevelopersIO
AWSに於いて、クラウドストレージサービスの『S3』は実に様々な各種AWSサービスから利用されています。サービスとしては特に欠かせないものの1つでしょう。 S3の数ある利用用途の中の1つとして『DBへデータを投入するための前段階としてS3バケットにファイルをアップロードする』というケースというものが考えられるかと思います。RDS(MySQL/Oracle/SQLServer)然り、データウェアハウス(Redshift)然り、NoSQL(DynamoDB)然り。良くある操作ですが、この操作はその手段や人手が絡む度合いに拠って、幾つかに分類する事が可能です。 そこで当エントリ、及び以降数回の続編エントリに亘って、『どんな手段があるのか、どういう風に組めばそれが実現出来るのか』と言ったポイントをキャプチャやサンプルコードを交えてそれぞれご紹介して行きたいと思います。 まずは『手段』の種類について
はじめてのAmazon SES/Lambda。メール送信ができるようになるまでの覚書 - Qiita
はじめに 今回はAmazon SES と Lambdaでメール送信の仕組みを作った時の覚書です。よくネット通販で買い物の後に、確認のための"no-reply"みたいな表題のメールが送られてきますよね。そういう仕組みを作りました。滅多にやらない作業なのでQiitaに残しておくのがよいと思いました。 なぜSES/Lambda？ 実は最初同様の仕組みをイチからスクラッチしかけていましたが、AWSの方も調査してるうちにそっちが楽そうに思えたからです。メールサーバの構築等々、仕組みもさることながら可用性うんぬん議論しはじめたらそれだけで何カ月もかかってビジネス速度に耐えられません。しかも私自身開発業務は初の体験。何が正解かわからない中での模索でしたが、結果的に工数削減の点でこの選択が正解だったと思います。 事前準備 SES SESの画面でDKIM等の設定を済ませておきます。で、ここで気づくのですが、
jq コマンドを使う日常のご紹介 - Qiita
jq コマンドとは http://stedolan.github.io/jq/ JSONから簡単に値を抜き出したり、集計したり、整形して表示したりできるJSON用のgrepとかawkみたいなコマンドです。 WebサービスがJSONを吐いたり、AWS CLIが JSON を吐いたりする現代社会で大変便利なコマンドです。 マニュアル だいたいここ読めばOK. http://stedolan.github.io/jq/manual/ あ、これで、終わってしまう。だけど気にせず進めます。 簡単な例 まず、空気をつかみましょう。 以下jqコマンドの記法を見ていきます。JSON { "hoge": "value" } があった場合、 . がルート {} を表します。.hoge で "value" を表現します。だいたいこんな感じです。 ただの整形 しばらく下記のJSONを例に進めます。itemsには配
AWS LambdaによるRDSの自動リストアスクリプト | DevelopersIO
はじめに DI部のおおたきです。前回AWS Lambdaを使ってRDSの削除スクリプトを書いてみましたが、今回は同様にpythonでスナップショットからのリストアスクリプトを書いてみました。 前回同様pythonコードは初めて書いているので、色々突っ込みどころがあるかもしれませんがご了承ください！ リストアのスクリプトを書きはじめて気がついたのですが、AWS SDKを使ってリストアする際にRDSのパラメータグループやセキュリティグループの設定はできません。これはAWS CLIでも同様みたいです。 そのため、リストア後に設定を変更する必要があります。リストア後に設定を変更するにはRDSの起動完了を待つ必要があるため、今回はLambdaからLambdaを呼出し起動が完了するのを待つようにしました。 ロールの設定をする 今回設定しているロールは以下になります。 AmazonRDSFullAcce
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
AWS CLIのS3でワイルドカードを使う方法 - Qiita
AWS CLIでS3を操作するコマンド一覧 - Qiita
