タグ

AmazonとCloud computingに関するse-miのブックマーク (61)

  • Cloud Computing考:Amazon ec2とGoogle App Engineの違いを私なりにまとめてみた

    Cloud Computing の話が注目されるようになってしばらく経つが、商用での格応用という意味ではまだまだ未熟な市場である。PhotoShareは去年の7月サービス開始時から Amazon の ec2+S3 という組み合わせで運営しており、私から見れば当然の選択だったわけだが、あのタイミングで商用サービスへの採用に踏み切った会社も少なかったのか、何件かインタビューの申し込みが来たりして少し驚いている(参照)。 すぐに陳腐化するハードウェアの資産はできるだけ持ちたくないし、自分でデータセンターにラックを借りるなんてことはコスト的に見合わない。かといって、通常のレンタルサーバーは初期費用がばかにならない(今は少しは改善されているのかも知れないが、去年の段階では「それじゃあハードが自分で買えるじゃん」と言わせるぐらいの初期費用を請求する企業がほとんどであった)。それに加えて、どのくらいの

  • モバツイッターがEC2に移転したその後の話を聞いてきた(Amazon EC2 ナイトセミナ 第2回) - 元RX-7乗りの適当な日々

    恵比寿で開催されたJJUG主催のナイトセミナー「アマゾンEC2 ナイトセミナ 第2回」に参加してきました。 目的は、モバツイッターの中の人である、えふしんさんによる、モバツイをEC2へ移行した話が聞きたかったのと、ついでにご挨拶したかったので早々と仕事を切り上げて行ってきました。 参考: F's Garage @fshin2000 :そろそろモバツイがEC2に移転した話でも書くとするか。 現在のサービスの状況やシステム構成、自宅サーバ運用の限界点など、裏側の話が特に興味深かった!面白かったです。 せっかくメモをとったので、ここに残しておきます。 究極のスモールスタート 自宅サーバからEC2へ 講演者 藤川真一(えふしん)さん (株)paperboy&co. ECコミュニティ事業部 ペパボはGMOインターネットグループ、レンタルサーバ(lolipop)、ブログ(JUGEM)などが有名 カラメ

    モバツイッターがEC2に移転したその後の話を聞いてきた(Amazon EC2 ナイトセミナ 第2回) - 元RX-7乗りの適当な日々
  • Amazon S3を共有ファイルシステムとしてマウントするとスケールアウトする時に便利 : やむにやまれず

    2009年08月21日23:44 by 山崎泰宏 Amazon S3を共有ファイルシステムとしてマウントするとスケールアウトする時に便利 カテゴリデザインネタ Tweet sparklegate Comment(0)Trackback(0) s3fsは共有ファイルシステムとして使うと超便利 ポイントは、複数のインスタンスからs3fsで同一バケットをマウントし、共有ディスク化できる、というところ。 ファイルアップロードするとローカルディスクに書き出しちゃう典型的なアプリに便利 結構この手のWebシステムは存在する。例えば、CMSのデザイン変更やブログ記事の写真など、アップロードされたファイルをディスクに書き出すような仕組みのWebシステムがあったとしよう。 そのシステムをそのままスケールアウトすると、アクセスを分散させることになって、毎回アップロード先のサーバが変わってしまう。 大抵の場合、

    Amazon S3を共有ファイルシステムとしてマウントするとスケールアウトする時に便利 : やむにやまれず
    se-mi
    se-mi 2009/09/02
    サーバ版Dropboxみたいな印象だ
  • 結局「Amazon EC2」と「さくらインターネットの専用サーバ」ではどちらが得か | 技術動向 | 毎日がアップデート | あすなろBLOG

    Amazon EC2を使っていると「1台あたりのサーバは“さくらインターネット”とどちらが安いのか?」「Amazon EC2とさくらインターネットの専用サーバ、どちらを使った方が良いのか?」という質問を受けることが多くなってきた。 さくらインターネットの専用サーバは、その価格の安さと性能の良さで数多くのネットベンチャーが採用している。一方のAmazon EC2も従量課金制ということはあるが、最小のインスタンス(仮想サーバ)は、1ヶ月の使用料金はさくらインターネットの専用サーバ「専用サーバ エントリー」とほぼ同等の価格だ。月次の料金が同等という事だけでは無く「エントリー」には初期費用が無く、価格的に見れば、どちらを選んだら良いのか選択が難しい場合があるだろう。今回は「Amazon EC2」と「さくらインターネットの専用サーバ」のどちらを選んだら良いかを考えていきたい。 《サーバの台数が決まっ

    se-mi
    se-mi 2009/08/16
    スケールアウトの逆パターンとして、サービスの撤収、縮小化の可能性がそれなりにある場合もAmazonがいいです。
  • http://japan.internet.com/webtech/20090721/8.html

  • 真にスケーラブルなWebアプリケーションを作るには?という話題で盛り上がった件 - Tous Les Jours 攻防記

    先週末は上京してRubyKaigiに参加してきました。 運よくLT枠をいただくことができたので、タイトルのようなテーマで(結構紆余曲折があって、当初の想定から逸れてしまった...)プレゼンさせてもらうことができました。 話の流れとしては、 「WebアプリケーションのボトルネックはRDB」 ↓ 「RDBってAmazonEC2みたいなHaaSではスケールしないよね。」 ↓ 「当に(アプリのコードをそのままで)スケールさせようと思ったら、AmazonSimpleDBのようなクラウドDBを使うしかない」 ↓ 「SimpleDBMySQLより一桁以上遅いから、単純にRDBSimpleDBに置き換えると、えらいことになる」 ↓ 「SimpleDBへのアクセスを極力少なくするため、リクエストはMemcachedとかでキャッシュしまくる必要があるね」 ↓ 「このあたりを今Lang-8で実験している。

    真にスケーラブルなWebアプリケーションを作るには?という話題で盛り上がった件 - Tous Les Jours 攻防記
  • ゆーすけべー日記

    サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。 お礼に料理を作るとはいえ、サキの家には材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ

    ゆーすけべー日記
  • 日本でAmazon EC2/S3を利用しているWebサービス | 技術動向 | 毎日がアップデート | あすなろBLOG

    「横田さん、実はうちもAmazon EC2使っているんですよ」最近、色々なイベントや講演会等に行って色々な人にお会いするのだが、このような声を聞く機会が多くなってきた。お話を聞いていると、実験段階は既に終わっており、スポット的に実運用されている方や、既存の案件をAmazon EC2にまわしている所も出てきているようだ 「自分達はAmazon EC2を使っている」とわざわざ公表する所は少なく、日ではそれほどAmazon EC2が普及していないかのように見えるが、水面下では色々なWebサービスが使っているようだ。今回は日WebサービスAmazon EC2を利用している所をご紹介したい。 ○モバツイッター → Twitterを携帯電話で見るひとができるWevサービス「モバツイッター」は、先日サーバをAmazon EC2に移行している。 ○ モバイル向けの検索エンジン「froute.jp

  • http://japan.internet.com/webtech/20090707/8.html

  • Amazon EC2で「スケールアップ」のジレンマ

    Amazon Web Servicesの仮想マシン・ホスティング・サービス「Amazon EC2」を使っていると,可能な限り課金を抑えるために仮想マシンのスペックをこまめに増減させる「スケールアップ/ダウン」を試みたくなる。しかしサービスの前提は,数を並べるスケールアウト。このギャップは埋まりそうにない。 まずEC2をご存じでない方のために,サービスの内容を簡単に説明しよう。EC2は,ECサイトで有名な米Amazon.comの子会社である米Amazon Web Servicesが手がけている仮想マシンの時間貸しサービス。「仮想マシンを即座に生成」「不要になったら消す」といった柔軟性が売りのIaaS(Infrastructure as a Service)である。このEC2を,ITproは関連記事の抽出に使っている。もともとはクラウド・コンピューティングをテーマにしたITpro Magaz

    Amazon EC2で「スケールアップ」のジレンマ
    se-mi
    se-mi 2009/07/03
    謎記事。EC2の負荷対策って最初からスケールアウトを考えるもんじゃないの?
  • そろそろモバツイがEC2に移転した話でも書くとするか。

    モバツイ以外にも実運用で回してるEC2な人たちは結構いると思うのですが、参考までに。 モバツイッターがAmazon EC2の人柱をやってくれている モバツイッターがAmazonEC2に移行しようかなとのこと。 さっそく性能問題にぶち当たったらしいし、ナイス人柱。 前にあるイベントで、EC2を活用されているHeartRailsの方にモバツイの構成をEC2に移転したらどうなるか?みたいな話をお伺いしたら、すぐ8万円/月ぐらいに構成になってしまう、と言われたのですが、大体、どんぴしゃな感じでした。 (追記:なお個人でWebサービスをスモールスタートする場合は、サーバの運用知識がそこそこある前提で、まずは自宅サーバから運用すると良いです。月間600万PVぐらいまでなら、HP ML115G5 + Phenomでこなせるハズなので。その辺についてはまたいずれ書きます。) ■EC2とは? 既にご存じの方

    se-mi
    se-mi 2009/06/28
    壮大な人柱のお話/個人サービスで使うにはコスト高だと思うんだが…。
  • Ring

    Ringとは、リクルートグループ会社従業員を対象にした新規事業提案制度です。 『ゼクシィ』『R25』『スタディサプリ』など数多くの事業を生み出してきた新規事業制度は、 1982年に「RING」としてスタートし、1990年「New RING」と改定、そして2018年「Ring」にリニューアルしました。 リクルートグループの従業員は誰でも自由に参加することができ、 テーマはリクルートの既存領域に限らず、ありとあらゆる領域が対象です。 リクルートにとって、Ringとは「新しい価値の創造」というグループ経営理念を体現する場であり、 従業員が自分の意思で新規事業を提案・実現できる機会です。 Ringフロー その後の事業開発手法 Ringを通過した案件は、事業化を検討する権利を得て、事業開発を行います。 さまざまな事業開発の手法がありますが、例えば既存領域での事業開発の場合は、 担当事業会社内で予算や

    se-mi
    se-mi 2009/06/17
    CloudFront
  • Amazon EC2で「Elastic Load Balancing」オプションを使って負荷分散/冗長化を実現する詳細手順 - 元RX-7乗りの適当な日々

    先日、Amazon Web Servicesより、以下、Amazon EC2関連の新サービスが3つ発表されましたね。 Amazon CloudWatch Amazon EC2のインスタンスのリソースをモニタリングすることが可能 Auto Scaling Amazon EC2のインスタンスの負荷状況を判断し、自動でインスタンス数を増減させ、スケーリングを実施することが可能 Elastic Load Balancing ロードバランサとして、各インスタンスのフロントエンドでトラフィックを分散させることが可能 これら3つは連携させて使うと、なかなか強力な可能性を秘めています。 例えば、「Amazon CloudWatch」にて、バックエンドのAmazon EC2のインスタンスの負荷状況を監視し、負荷量がある一定の閾値を超えた段階で、「Auto Scaling」にて、Amazon EC2のインスタ

    Amazon EC2で「Elastic Load Balancing」オプションを使って負荷分散/冗長化を実現する詳細手順 - 元RX-7乗りの適当な日々
  • 大規模インフラ個人運用:AWS+Hadoopの成功例 | wrong, rogue and log

    これは西村さんからTwitterで教えてもらったことなのであるが、AWS+Hadoopの幸せな成功例である: Self-service, Prorated Super Computing Fun! NY Timesが過去のアーカイブを含めてすべて無料化したわけだが、そのシステム的な移行措置として過去のスキャンしたTIFF画像をPDFに変換する必要があったのだ。TIFFのサイズは合わせて4TBという巨大さ。 これを行うのに次の構成をとったそうだ:PDF変換にiTextを用いる。変換するマシンはAWS上の100インスタンスをHadoopでMapReduce構成をとることで並列化した。これによりすべてのPDF変換(なんと成果物は1.5TB)が、24時間未満の時間で終了したのだ。そして作業をしたのは、一人のプログラマだけである。 だから言ったでしょ。もう時代は一人大規模サービスの時代なんですよ。そ

    大規模インフラ個人運用:AWS+Hadoopの成功例 | wrong, rogue and log
  • 「えもにゅ」がAmazon EC2で動くまで | feedforce Engineers' blog

    先月末、「えもにゅ」というサービスをリリースしました。さらに12日には携帯から「えもにゅ」に投稿できる「えもにゅモバイル」もリリースしました。 感情を記録できるサービス 『えもにゅ』 をリリース! 『えもにゅ』 にモバイル版登場! えもにゅとは 「えもにゅ」は自分の今の「気持ち」とその「度合い」を選んで投稿するサービスです。投稿した気持ちは「えもにゅくん」というキャラクターの表情によって表現され、ブログパーツを通してブログ上で公開することができます。 感情とブログパーツに特化している点が、これまでのライフログ系のサービスとは異なる点かと思います。 また、「人」と「時間」と「感情」のデータを結びつけて蓄積し、そのデータをAPI経由で公開することで、新たな相乗効果が生まれることを期待しています。(APIは今後公開予定です) えもにゅをEC2で動かす さて、その「えもにゅ」ですが、サーバーは A

    「えもにゅ」がAmazon EC2で動くまで | feedforce Engineers' blog
  • Amazon EC2を高速化する方法 - yukobaのブログ

    Amazon EC2 に High-CPU Extra Large Instance (c1.xlarge) というのがありまして、8コアのCPUと7GBのメモリを持っています。CPUは Intel Quad Core Xeon が2つ載っているものが多いそうです。 しかし、こいつがくせ者で、http://developer.amazonwebservices.com/connect/thread.jspa?messageID=116855 でも、取り上げられていますが、いまいち速くならない! top コマンドで、1を押すと、各コアのCPUの使用状況が見れるのですが、2〜4コアしか使ってくれません。しかも、使用コア数は、動的に変化します。いろいろ試して発見したのですが、nice -n -20 を使って、プロセスのプライオリティをあげると、6〜8コア(だいたい8コア)を使ってくれて、期待通り

    Amazon EC2を高速化する方法 - yukobaのブログ
  • Amazon EC2で素のCentOS 5を動かす手順

    Amazon EC2でCentOS 5のサーバを動かすまでの作業手順です。 ■要約 ・Rightscaleが公開しているAMIを使用する。 ・以下のコマンドを使う。 ec2-describe-images -x all --- 公開イメージの一覧を表示 ec2-add-keypair 鍵名 --- 鍵ファイル作成 ec2-describe-images --- インスタンスの状態を確認 ec2-run-instances イメージ番号 -k 鍵名 --- インスタンス起動 ec2-terminate-instances インスタンス番号 --- インスタンス終了 ■前提条件 ・AWSのアカウント作成が完了している。 ・Amazon EC2 Command-Line Toolsの導入が完了している(ec2verコマンドが動く状態)。 ・Access Key ID、Secret Access

    Amazon EC2で素のCentOS 5を動かす手順
  • アマゾンクラウドフロント(AMAZON CLOUDFRONT)を導入しました - EC studio 社長ブログ

    IT業界の2008年流行語大賞は間違いなく「クラウドコンピューティング」ですね。 ※私だけが言ってるので正式ではないです。。 アマゾンが切り開き、Google が追従し、IBMも参入を表明した クラウドコンピューティングにはEC studio も恩恵を受けています。 ■クラウドコンピューティングとは 今まではサイトを立ち上げようと思ったら、全て自社でサーバーを 用意しなければなりませんでした。どのレンタルサーバーを利用し 負荷が増えてきたら負荷分散して。。。サーバー増強して、、、 しかもアクセスのピーク時に備えてサーバーを増強しなければ いけませんので、コストが高く付き、アクセスが少ない時間帯は サーバーが遊んでいる状態でした。 ※Yahoo!ニュースに紹介でもされたら、負荷に耐えきれず サーバーダウンするのは、いろんなサイトで起きていますよね。 しかし、アマゾンがEC2やS3と言う従量課

  • AmazonS3上のファイルを国内でも高速配信可能なAmazon CloudFrontリリース : Media Technology Labs (MTL) : メディアテクノロジーラボ ブログ

    Ringとは、リクルートグループ会社従業員を対象にした新規事業提案制度です。 『ゼクシィ』『R25』『スタディサプリ』など数多くの事業を生み出してきた新規事業制度は、 1982年に「RING」としてスタートし、1990年「New RING」と改定、そして2018年「Ring」にリニューアルしました。 リクルートグループの従業員は誰でも自由に参加することができ、 テーマはリクルートの既存領域に限らず、ありとあらゆる領域が対象です。 リクルートにとって、Ringとは「新しい価値の創造」というグループ経営理念を体現する場であり、 従業員が自分の意思で新規事業を提案・実現できる機会です。 Ringフロー その後の事業開発手法 Ringを通過した案件は、事業化を検討する権利を得て、事業開発を行います。 さまざまな事業開発の手法がありますが、例えば既存領域での事業開発の場合は、 担当事業会社内で予算や

  • 本日サーバレンタルサービス終了の日(Amazonを除いて) : やむにやまれず

    2008年10月24日10:56 by 山崎泰宏 日サーバレンタルサービス終了の日(Amazonを除いて) カテゴリ雑談 Tweet sparklegate Comment(0)Trackback(0) Big Day for Amazon EC2: Production, SLA, Windows, and 4 New CapabilitiesLoad Balancing - The load balancing service will allow you to balance incoming requests and traffic across multiple EC2 instances. Automatic Scaling - The auto-scaling service will allow you to grow and shrink your usage of E

    本日サーバレンタルサービス終了の日(Amazonを除いて) : やむにやまれず