Terraform + GitHub + CircleCI + Atlasを利用してAWSの操作を自動化した - Glide Note
TL;DR Terraform + GitHub + CircleCI + Atlas を用いてAWSの操作を自動化した 各ツールの役割は下記のような感じ Terraform => インフラへの変更ツール GitHub => .tfファイルのバージョン管理 CircleCI => CI、Terraformをawsに対して実行 Atlas => インフラの状態を記録するterraform.tfstateの管理 インフラの継続的デリバリー - naoyaのはてなダイアリーにて、言及されていた範囲(Route53の変更、Chefの適用)をAWSの操作全体に拡大した 背景 今までの問題点 AWSの各種操作がブラウザからポチポチ業… 手作業なので誤操作に気づきにくい。事故りやすい インフラの実構成がバージョン管理出来ていない ちなみにRoute53に関してはroadworkerを用いてコードで管理済
Vagrant - naoyaのはてなダイアリー
先日 Vagrant を触ってみたら便利すぎて鼻血が出ました。しばらく見ないうちに色々進んでるもんですねえ、いやはや参っちゃいました。 Vagrant は仮想マシンの VirtualBox のフロントエンドに相当する、ruby で書かれたツールです。vagrant コマンドなどを使ってコマンドラインから簡単に新しい VM を作れる。 % gem install vagrant % vagrant box add centos http://developer.nrel.gov/downloads/vagrant-boxes/CentOS-6.3-x86_64-v20130101.box % vagrant init centos % vagrant upこれだけで CentOS の Linux box をローカルマシン内に立ち上げることができる。*1 *2 なにこれすごい。 % vagra
S3とIAMを組み合わせたお手軽ファイル共有
ファイルをやり取りする時など、イントラにあるファイルサーバー（SambaやAFP、NFSなど）を経由させるのが一番お手軽な方法だと思います。実際、最近のNASは安いですし、RAIDも簡単に組めてそこそこ信頼性もあります。ちなみに弊社ではBuffaloのTera Stationを利用しています。 ですが、このファイルサーバーをクラウドに持って行くとなると結構大変です。弊社の場合ですと、エンジニアと印刷オペレーターとでファイルをやり取りする機会も多いので、エンジニア以外の人たちでも簡単に扱える仕組みが必要となります。AWSでこの手の「ファイル共有」プロトコルを喋らせるにはEC2を仕立ててあげなければなりませんが、今回はそのような時間もお金もかける事が出来ません。 AWSにはS3という容量無制限のストレージサービスがあります。CloudBerry ExplorerやCyberduckを使えば、F
1GB/1円のAmazon Glacierを個人でも活用する方法 - ku-sukeのブログ
先日1GB/1円 衝撃のAmazon Glacierを早速使ってみた - ku-sukeのはてなダイアリーという記事を書きました。ブコメとかで結構気軽には使えないよね―という意見があったのですが、先日S3経由での利用オプションができたので、割りと個人でも簡単に使えるようになったということでそのやり方を紹介してみようと思います。 S3経由でGlacierを使う新機能とは？ 普通の速度で使える方のクラウドストレージであるAmazon S3にファイルを保存すると、勝手にGlacierにファイルを送ってS3上にはショートカットのようなものだけを置く感じにしてくれるサービスです！ 一度S3に保管しますが、S3の利用料はほとんどかからず激安価格でGlacierに保管することができます。もちろん取り出しには数時間かかるという点は変わらないのですが、S3上でファイルの一覧が管理されているので、安心して利用
Amazon Elastic MapReduceに今さら入門してみた - nokunoの日記
というわけで冬休み最後の自由研究として、Amazon Elastic MapReduce（EMR）を使ってみました。今なら公式ページもほぼ日本語化していて楽チンです。Amazon Web Services (日本語) Amazon Elastic MapReduceとはAmazon EMRは、Amazonのインフラ上で動作する仮想サーバーを使ったHadoopクラスタを時間単価で貸し出すサービスです。少々わかりにくいので、Amazon Web Service(AWS)の関連する製品群について整理しておきます。EC2 (Elastic Compute Cloud) EC2は、仮想マシンを時間単価で貸し出すサービスです。 EMRを使わずに、EC2に自前でHadoopをインストールして使うやり方もあります（EMRが出来る以前はそれしかなかった）。 EMRを使う場合でも、バックグラウンドでは自動的に
30分で実行するAmazon Elastic MapReduce（Amazon EMR）
今年のテーマの一つはビッグデータということで、そろそろ本格的にMapReduceに手を出そうと思います。 手軽にMapReduceを試してみるのであれば、やはりAWSでしょう。今回はAmazon Elastic MapReduce（Amazon EMR）を動かす方法を簡単にまとめておきます。 実行する処理の例としては、Hadoopのチュートリアルにある処理をそのまま使わせてもらいましょう。与えられたテキスト（英文）に出現する単語を数えるというものです。 実行する処理 与えられたテキストに出現する単語を数える 実行の手順 Amazon EMRにはApache Hadoopが使われています。本来Hadoopを使うためには、Hadoopの環境そのものをセットアップする必要があるのですが、そこをAWSが既にやってくれているわけです。 そのため、手順としては Hadoopのジョブとなるjarファイル
AWS + 網元で、超高速 WordPress を手に入れよう、そうしよう
8月1日から、このサイトの WordPress を置いているサーバーを Amazon Web Services（以下 AWS）の Elastic Compute Cloud（以下 EC2）に移してみました。 ちょっぱやになってるけど、でも導入難しいんでしょう？なんてぼくが半年前に思っていたような声が聞こえてきそうですが、AWS の導入自体はさして難しいものではありません。 この記事では、ぼくでもできる、あなたでもできる AWS + 網元の導入についてご紹介します。 Table of Contents AWS って何？ 網元って？ AWS のアカウントを作成する AWS コンソールにログインする EC2 のリージョンを選ぶ Key Pairs を作成する Security Groups を作成する サーバーインスタンスを立ち上げる Elastic IPs を設定する WordPress のセ
Amazon EC2、EBS(Elastic Block Store)を使ってみた ｜ 横浜のホームページ制作 スタジオFIXの社長ブログ
ただのWebデザイナーですが、 Amazon EC2をバーチャルドメインで運用 できちゃったりしたので、 「ITコスト削減、万歳！」と唱えながら昨夜は家路につきました。 そして達成感とともに、ようやく恐怖感も芽生えてきました。 だって、Amazon EC2 のインスタンスって、 シャットダウンさせるとディスク上のデータが消滅しちゃんだよ？ 普通、マシンの電源をOFFにしてもデータは残りますよね？ 「全データ消去」って、どんだけーーーーーーー!! Amazon EC2 は、99.95%のサービスレベルを保証してくれているので 万が一、0.05%の確立で何かが起きても 運が悪かったで片付けられそうな気がしますが、 あたしくらいになると、自分でうっかり （しかも自信をもって堂々と）ポチっと削除しちゃう可能性の方が大きそう…。 そのために Amazon S3 という ストレージサービスが提供されて
さくらVPS amazonEC2 CPUスペック比較 - おさんぽブログ
それぞれベンチマーク結果を元に参考数値。 プラン スコア ECU コア 価格 価格2(SPOT) さくらのVPS 1G 1950 - 2 月980円 さくらのVPS 2G 3000 - 3 月1480円 さくらのVPS 4G 4000 (*) - 4 月3980円 さくらのVPS 8G 6000 (*) - 6 月7980円 EC2 Micro 77.6 - - 月1652円 月612円 EC2 Simple 126.6 1 1 月5630円 月2509円 EC2 Medium 250(*) 2 1 月11260円 月3549円 EC2 Large 500(*) 4 2 月22521円 月9914円 EC2 XLarge 1000(*) 8 4 月45043円 月19828円 EC2 HM XL 812(*) 3.25 2 月31701円 月14871円 EC2 HM D XL 1625(
Amazon EC2 EBSブートしたインスタンスの領域拡張 - 蟻の実験工房（別館ラボ）
wikipediaのxmlデータのダウンロード後にmysqlに投入するも容量が足りなくなりAmazonのEBSを拡張したりと色々とやっていました。 本家のサイトはAmazonのEC2のサービスを利用しています。 EBSブートしたインスタンスの領域を拡張する場合、直接的に領域を拡張する場合はコマンドツールで起動オプションを変える必要があるそうです。 ただ蟻の管理人はFireFoxのElasticfoxというツールでEC2の管理をしているので、わざわざコマンドツールを導入するのが面倒だったので、一旦EBSのブート領域のスナップショットをとって、さらにとったスナップショットをボリュームにもどして（この時に領域を拡張）マウントし直す。という方法をとりました。 やり方は以下のとおりでした。 １．現在のインスタンスの停止（必ずstopで停止です。terminalだとインスタンスが消えてしまいます） ２
Amazon EC2の使い方 目次 - nishio-dens's diary
Amazon EC2の申し込み，使い方，及びAmazon S3へのイメージバックアップ方法についての記事を書きました． Amazon EC2やS3の制御にはAWS Management Consoleを使っています． なお，Amazon MapReduce等，他のサービスについては触れていません． クラウドコンピューティング技術に興味のある方，Amazon EC2の利用を検討している方は是非ご覧ください． はじめに Amazon EC2への申し込み アクセスキーの作成 AWS Management Consoleを用いたインスタンスの生成 Amazon EC2インスタンスにSSHでアクセスする Amazon EC2インスタンスに固定IPアドレスを割り当てる Amazon S3に新しいバケットを作成する Amazon EC2のイメージをAmazon S3にバックアップする Amazon S3
AWS Snowball（セキュアなペタバイト規模のデータ転送）| AWS
インターネット接続がない厳しい条件下にあるエッジ環境でアプリケーションのパフォーマンスを加速し、接続がほとんどないか、まったくない状態でコンピューティングワークロードを実行します。 Snowball の頑丈なシャーシ、統合されたロジスティクス、改ざん防止ボックスを使用して転送中のデータを保護し、データを適切な場所に迅速に移動します。 AWS Snow ファミリーコンソールで、Snowball Edge Compute Optimized または Snowball Edge Storage Optimized のいずれかを優先デバイスに選択します。Simple Storage Service (Amazon S3) バケットを使用してジョブを作成し、追跡用に Amazon Simple Notification Service (Amazon SNS) を選択して、Amazon EC2 AMI
続：Amazon Clusterインスタンスで計算: 週記
震災から2週間が過ぎました。 まず、今回の震災で被害に遭われた方々、またご家族が被害に遭われた方々にお見舞い申し上げます。 被災地域直接ではありませんが、震災の影響範囲に私なりに少しでも出来ることをと考え、この記事を書くことにしました。 ご存じの通り、現在の東日本では電力状況が切迫しており、輪番停電が実施されております。 これは、計算機クラスタを日常的に研究に使う者にとっては非常に厳しい状況です。 各研究室で所有しているクラスタも、節電と輪番停電のため動かせない状況が続いていると伺っています。 また、外部計算リソースについても、現在の日本の外部利用可能な計算機の状況を@plus7さんがブログで纏めて下さいました。これはほぼ壊滅的と言って良い状況です。 そこで、本記事ではAmazon Elastic Compute Cloud (EC2)を使って、即席計算リソースを作る手順を記述してみようと
SGE-Hedeby-And-Amazon-EC2 - GridWiki
About this document The purpose of this page is to document a recent "proof of concept" project conducted in order to show how Sun Service Domain Management ("SDM") tools (aka "Project Hedeby", http://hedeby.sunsource.net) can be used in cooperation with the Hedeby Grid Engine Service Adapter (http://hedeby-ge-adapter.sunsource.net/) and the new Sun Grid Engine 6.2 (with embedded JVM and JMX API f
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Amazon Simple Storage Service
ライフサイエンス | AWS
クックパッドでのVPC移行について
Amazon EC2 Technical FAQs : Articles & Tutorials : Amazon Web Services
はじめてのアマゾンクラウド②[仮想サーバ(Amazon EC2)を立ち上げる]![はじめてのアマゾンクラウド②[仮想サーバ(Amazon EC2)を立ち上げる]](https://cdn-ak-scissors.b.st-hatena.com/image/square/27c51c3db844e75c594a4c14a2db90c6e99a7180/height=288;version=1;width=512/https%3A%2F%2Fcdn.slidesharecdn.com%2Fss_thumbnails%2F3ec2-101107160809-phpapp01-thumbnail.jpg%3Fwidth%3D640%26height%3D640%26fit%3Dbounds)
BLOGOS サービス終了のお知らせ
