お手軽JMeterクラスター 〜 フルボッコ編｜アドカレ2013 : CFn #1 | DevelopersIO
よく訓練されたアップル信者、都元です。12月ですね！ 全国のエンジニアの皆様！ いよいよこの季節がやってまいりました。そう、アドベントカレンダーです。 今年のDevelopers.IOでは、複数テーマのアドベントカレンダーが同時進行していくようですが、これは「クラスメソッドAWSチーム」によるアドベントカレンダーです。これからクリスマス・イブまでの毎日、1つずつエントリーを投下していきます。 CloudFormationビッグバンテンプレート クラスメソッドAWSチームのアドベントカレンダー2013は、題して「CloudFormationビッグバンテンプレート」です。 AWS公式ページの中にAWS CloudFormation サンプルテンプレートというページがあります。多くのテンプレートはその名の通り「サンプル」なのですが、中にはWordpressやRedmineサーバを構築するテンプレ
Amazon SQS による分散キュー | DevelopersIO
Amazon SQS とは Amazon SQS は、AWSが提供する分散キューサービスです。APIを使ってアクセスすることができます。SQSによってアプリケーションのメイン処理と非同期に動いてほしい処理を分離することができます。キューは待ち行列を提供し生産者（Producer）によって生成されたメッセージのバッファリングをし、消費者（Consumer）によってコンポーネントへメッセージデータが渡されます。キューは複数登録することができます。キューに対して複数のリーダーとライターが接続できますので、ひとつのキューに対して複数のアプリケーションから同時に利用することができます。 分散キュー SQSは障害時に正常系へ切り替わるように設計された（フェイルセーフな）仕組みを提供しています。おなじみの分散配置されたAWSインフラの成せる技です。キューの仕組みは自前でも構築は容易ですが、フェイルセーフ
AWS や Azure でWindows Server 2012 英語インスタンスを日本語化して PowerShell Remoting しようとしてCode="2" で実行できない場合の対処 - tech.guitarrapc.cóm
AWS の EC2 インスタンスには、 Windows Server 2008 R2 と Windows Server 2012 が2/10 現在利用可能です。 日本語AMIを使わない限り、EC2インスタンスがデフォルトで提供しているのが英語OSなため、日本語化して使うことが多いと思います。 しかし、何も考慮せずに日本語化して、PSRemoting (PowerShell Remoting) の有効化を試みると以下のエラーで失敗します。 Enable-PSRemoting -Force Set-WSManQuickConfig : <f:WSManFault xmlns:f="https://schemas.microsoft.com/wbem/wsman/1/wsmanfault" Code="2" Machine="localhost"><f:Message><f:ProviderFa
Amazon EC2 の t1.microインスタンスでMySQLがよく落ちる
EC2 の t1.microインスタンスにてWordPressを複数たててると、まーよくMySQLが落ちます。 しまいには起動もしなくなるので、MySQLのログを見てみます。 130629 5:46:48 InnoDB: Initializing buffer pool, size = 128.0M InnoDB: mmap(137363456 bytes) failed; errno 12 130629 5:46:48 InnoDB: Completed initialization of buffer pool 130629 5:46:48 InnoDB: Fatal error: cannot allocate memory for the buffer pool 130629 5:46:48 [ERROR] Plugin 'InnoDB' init function returne
Fluentd、Amazon RedshiftとTableauを用いたカジュアルなデータ可視化 | SmartNews開発者ブログ
ゴクロ改め、スマートニュース株式会社の大平です。 巷間では「bigdata」の活用が叫ばれて久しいですが、弊社はまだまだ小さい規模のスタートアップのため少なくともデータサイズとしてhugeなdataの活用が行える環境ではありません。 であればデータの活用に対する要求が低いか、というとそうでも無く、サービスサイドでも自然言語処理や機械学習を中心としたデータ解析処理がサービスの生命線となっていますし、サービスの裏側でも戦略を立てる上で効果測定や諸々のデータの分析は非常に重要な位置を占めています。 本記事では主にサービスの裏側で求められるデータ解析において、いかにカジュアルにデータを解析するか、の一例として、掲題のような組み合わせによるデータ可視化の事例を簡単にですがご紹介したいと思います。 データ解析基盤を作る側の視点からすると、システムとして求められる要件は以下のようなものだと理解していま
Monitor memory and disk metrics for Amazon EC2 Linux instances - Amazon Elastic Compute Cloud
Monitor memory and disk metrics for Amazon EC2 Linux instances You can use Amazon CloudWatch to collect metrics and logs from the operating systems for your EC2 instances. The CloudWatch monitoring scripts are deprecated. We strongly recommend that you use the CloudWatch agent to collect metrics and logs. For more information, see Collect Metrics from Amazon EC2 Instances and On-Premises Servers w
Amazon VPCでRDSを起動するまでの手順 - サーバーワークスエンジニアブログ
こんにちはAWSチームの柳瀬です。 最近Amazon VPCがどんどん拡張されていて、どんどん魅力的なサービスになっていますね。 そして多くの方が待ち望んでいたRDSも、本日VPC内で使用出来るようになりました！！（ぱちぱち） 私もさっそく起動させてみたので、手順をまとめておきました。 ※VPCの作成は事前に完了させておいて下さい。 ■DB Subnet Groupを作成します。DB Subnet Groupは必ず最低一つ作成する必要があります 以下のようにVPC ID、Availability Zone、Subnet IDを指定してDB Subnet Groupを作成します。 ※Multi-AZ環境で使用する事を考え、DB Subnet Groupには2つのAZを登録します。 ※DB Subnet Groupを作成完了後、反映されるまでに少し時間がかかるようなので気長に待って下さい。 ■
Amazon ELB を作成し Amazon EC2 への負荷を分散する設定 - bekkou68 の日記
はじめに Amazon ELB を作成し Amazon EC2 への負荷を分散する設定をメモします。 ゴール Amazon ELB に Amazon EC2 のアプリインスタンスが 2つ紐づいた状態で負荷分散されていること。 前提 Amazon EC2 のアプリインスタンスは 1つできているとします（以下、インスタンスA と呼ぶ）。インスタンスのつくりかたはこちら。また、インスタンスA で何らかのサーバが立ち上がっていてブラウザから接続できるとします。 自分のプロジェクトの名前は myproject とします。 大まかな手順 インスタンスA がぶらさがった ELB を作成して接続を確認 インスタンスA のイメージからインスタンスB を作成 インスタンスB を ELB にぶらさげて負荷分散されることを確認 インスタンスA がぶらさがった ELB を作成して接続を確認（2013年09月20日更
Amazon VPCを使ってWEBサーバを構築しよう！～パート②～
前回に引き続き、今回もAmazon VPCを使ってWEBサーバを構築しよう！～パート②～と題して、お話していきたいと思います。 パート①では、「Public Subnet」のテンプレートを利用してVPCの作成までをおこないました。 パート②となる今回では、「実際にインスタンスを立ち上げてアクセスするまで」を紹介していきます！ なお、前回のパート①の記事は下記を参照してください。 ■Amazon VPCを使ってWEBサーバを構築しよう！～パート①～ それではさっそく進めていきましょう！ 1. EC2のページから「インスタンス作成」で起動ページに移動します。 ※今回はAmazon Linuxを利用して立ち上げてみます。 2. インスタンスタイプの設定を行います。 3. 「インスタンス詳細の設定」の画面の「ネットワーク」で今回作成したVPCを選択します。「ネットワークインターフェイス」の設定でI
Amazon VPCを使って仮想ネットワークを作成する | イーライセンスシステムズ技術ラボ
この手順ではAmazon VPCを用いて、仮想ネットワーク(VPC)を作成し、 その中にサブネットを作成するまでを取り扱います。 【作業概要図】 VPCについてVPC(Amazon Virtual Private Cloud)はAWS内のサービスで、 仮想ネットワークを構築するものです。使い方としては、VPCで作成した仮想ネットワーク内にいくつかのサブネットを切り出していき、 その中にEC2インスタンスを構築していく形となります。 (サブネットは通常のNWのサブネットとほぼ同義です)VPCを使うメリットとしては、以下の点が挙げられます。EC2単体では出来なかった、外部から遮断されたインスタンスの作成ができる。既存NWとVPNで接続することにより、EC2インスタンスを既存NWの一部のように使える。VPCやサブネット単位で外部からのアクセスコントロールが可能であり、セキュリティを担保しやすい。
ELB配下のインスタンス全てにcapistranoでデプロイする
最近はもっぱらAWSでのサーバ運用ばかりしています。 で、AWS EC2を使ってる際にどうしようかなぁと思うことの一つに、IPが固定されない、 ということがあると思います。 EIPなりVPCなり使えばIPの固定自体は出来ますが、いちいち固定IP付けるの面倒だし…という時とか。 今回はアプリケーションをデプロイする時にそれを感じました。 capistranoを用いたデプロイ時にデプロイ先のサーバのアドレスを指定しますが、 ELBにぶら下がるインスタンスに固定IP付けてないんだよなぁ、というケースです。 そこで aws-sdk for ruby を使って、ELB配下のインスタンスを取得するように設定してみました。 今回はVPC内のインスタンスを対象にしてたので、通常のEC2インスタンスであれば、 instance.private_ip_address を instance.dns_name に
ELBを作成し、EC2への負荷を分散する | イーライセンスシステムズ技術ラボ
Amazon ELBを作成するこの記事ではELBを作成し、EC2インスタンスへの負荷を分散する手順を説明します。 【作業概要図】 ELBについてELB(Elastic Load Balancing)とは、EC2へのトラフィックを分散するロードバランサー機能です。外部からのトラフィックを、複数のEC2インスタンスにバランシングし、 インスタンスにかかる負荷を分散することができます。また、EC2のヘルスチェックを行い、問題があるインスタンスには割り振らないことも可能なので、 可用性の向上にも利用する事ができます。詳しくは、公式サイトを参照してください。前提今回の手順では、80番ポートへのHTTPアクセスを、2つのEC2インスタンスに振り分けます。そのために、事前にVPC内にApacheを立ち上げた2つのEC2インスタンスを作成して、 外部から80番ポートへのアクセスを許容するSecurity
Amazonのロードバランサーの使い方 | さぶみっと！JAPAN
はじめに Amazonのロードバランサー、“Elastic Load Balancing”（以下ELB）は他にあまりないクラウドのロードバランサー（以下LB）です。 極シンプルなELB×1+ノード×2で見積もってみると ※AWS東京リージョンのEC2,microインスタンスをノードとする ELB $20.16 ノード $19.44×2 =$59.04 1$80円で計算して4,723円/月 です。 これにトラフィックに応じた料金がかかります。 AWSの料金計算はいろいろな組み合わせがあって複雑ですが、サーバ会社の共用ロードバランサーを使うより、初期費用は格段に安く済みます。 さらにクラウドの恩恵が享受ができます。 しかし いくつか通常のLBと異なる特徴があります。 Amazonは詳細な理由を積極的に発表していないのですが、おそらくクラウドの可用性をとるためにいくつか、制約が必要だったように見
【勉強会】AWS管理を自動化する奥義を開催しました！ | DevelopersIO
クラスメソッドブログ課外授業8日目 AWS&自動化の勉強会はやっぱり勢いがありますね～！満員御礼でした！ただ、ここまで超満員になったのは初めてでしたので、会場に来ていただいた方の中には資料が見づらいなどご不便おかけしたと思います。次回以降改善対象とさせていただきます。 @shinyaa31さんがまとめてくれたTogetterはこちらになります！ 1時間目：ChefとOpsWorksでEC2楽チンクッキング！ 1時間目は、大瀧隆太によるシステムの運用管理ツールとして注目されるChef。ChefをベースとしてEC2の管理に活用できるOpsWorksについてです。発表したスライドは以下になります。 ChefSoloのデモを行っている大瀧先生。Chef 2時間目：Rudess（仮）を支える技術 ～ CloudFormationの活用事例と詳細解説 2時間目は、都元ダイスケCloudFormatio
SpotInstanceとJMeterを使って400万req/minの負荷試験を行う | DevelopersIO
Apache JMeterのMaster/Slave構成 シナリオを用いた負荷試験といえばJMeterということで、使ったことがある方も多いかと思います。しかし、ほとんどの方は自分のPCを使ってやっている程度ではないでしょうか。最近は、スマホ連動のシステムが多くなってきていますので、1台のPCから負荷を掛けたとしても大した負荷試験になりません。そこで、今回はJMeterをMaster/Slaveのクラスター構成にしてドカーンと同時アクセスを行いたいと思います。 クラスメソッドの負荷試験の歴史 創業時から業務系のシステム開発が多かったことから、レスポンスは3秒以内でOKとか、ピーク時の同時ユーザは100名といった、緩い条件をクリアすれば良かったことが懐かしく思います。今は、ユーザ数・データ量・トランザクション数・トラフィック等が爆発的に増える可能性のあるプロジェクトも多く、負荷試験は必須項目
AWS-CloudDesignPattern CDP2.0候補
AWSクラウドデザインパターンとは？ AWSクラウドデザインパターン (AWS Cloud Design Pattern, 略してCDPと呼ぶ)とは、AWSクラウドを使ったシステムアーキテクチャ設計を行う際に発生する、典型的な問題とそれに対する解決策・設計方法を、分かりやすく分類して、ノウハウとして利用できるように整理したものである。 これまで多くのクラウドアーキテクト達が発見してきた、もしくは編み出しきた設計・運用のノウハウのうち、クラウド上で利用が可能なものをクラウドデザインのパターンという形式で一覧化し、暗黙知から形式知に変換したものであるといえる。 パターンの中には、クラウドでなくても実現できるもの、今まででも実現されていたものも含まれているが、クラウド上でも今まで通りのアーキテクチャが実現でき、かつクラウドを利用する事で、より安価にそしてより容易に実現できるものは、CDPとして収
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Consuming Amazon Web Services (SQS, S3) using C#.NET
いぬごやねっと
MySQL Meetup July_2012-scaling_pinterest
AWSクラウド利用料算出の参考資料
