Blog
MPI Cluster with Python and Amazon EC2 (part 2 of 3) » Data Wrangling Blog
Posted by Peter Skomoroch on Apr 09, 2007 to cluster computing, python, mpi, amazon ec2, and cloud computing Today I posted a public AMI which can be used to run a small beowulf cluster on Amazon EC2 and do some parallel computations with C, Fortran, or Python. If you prefer another language (Java, Ruby, etc) just install the appropriate MPI library and rebundle the EC2 image. The following set of
続：Amazon Clusterインスタンスで計算: 週記
震災から2週間が過ぎました。 まず、今回の震災で被害に遭われた方々、またご家族が被害に遭われた方々にお見舞い申し上げます。 被災地域直接ではありませんが、震災の影響範囲に私なりに少しでも出来ることをと考え、この記事を書くことにしました。 ご存じの通り、現在の東日本では電力状況が切迫しており、輪番停電が実施されております。 これは、計算機クラスタを日常的に研究に使う者にとっては非常に厳しい状況です。 各研究室で所有しているクラスタも、節電と輪番停電のため動かせない状況が続いていると伺っています。 また、外部計算リソースについても、現在の日本の外部利用可能な計算機の状況を@plus7さんがブログで纏めて下さいました。これはほぼ壊滅的と言って良い状況です。 そこで、本記事ではAmazon Elastic Compute Cloud (EC2)を使って、即席計算リソースを作る手順を記述してみようと
yebo blog: Apple、iCloudにMicrosoft AzureとAmazon AWSを採用
2011/09/04 Apple、iCloudにMicrosoft AzureとAmazon AWSを採用 The Registerによれば、AppleはiCloudの構築に2つのクラウドプロバイダMicrosoft AzureとAmazon AWSを利用しているとの事。メインはAzureのようで、リスク分散のために2つのクラウドサービスを利用している。異なるクラウドを結びつけるためにJavaのようなクロスプラットフォームを利用したのでは複雑性が増すだけなので、AWSでWindowsを動かすようにしたのではないかという話もある(AWSはLinuxの上で構築されている)。また、Azureはコンピューティング、コントロール、SQLデータベースを使い、AWSはストレージのみを使用し、Microsoftのコンポーネントと完全ストライプされているという話もある[electronista]。いずれにし
Ruby/Amazon S3を使う - 俺の基地
バージョンと製造年月日 2009年09月08日 Ruby 1.8.6 aws-s3 0.6.2 WindowsXP SP3 ▲ ▼ 環境構築 AmazonのストレージサービスをS3から使うライブラリ aws-s3 があるのでこいつをインストールする gem install aws-s3 こいつには3つの依存性がありgemなら自動的にインストールされるんだが、一応乗っけておく xml-simple http://rubyforge.org/projects/xml-simple/ builder http://rubyforge.org/projects/builder/ mime-types http://rubyforge.org/projects/mime-types/ ▲ ▼ 接続設定 まず接続設定を行う。こいつはAmazonのサービスで毎度使う、生成idとkeyの
Amazon Elastic MapReduceに今さら入門してみた - nokunoの日記
というわけで冬休み最後の自由研究として、Amazon Elastic MapReduce（EMR）を使ってみました。今なら公式ページもほぼ日本語化していて楽チンです。Amazon Web Services (日本語) Amazon Elastic MapReduceとはAmazon EMRは、Amazonのインフラ上で動作する仮想サーバーを使ったHadoopクラスタを時間単価で貸し出すサービスです。少々わかりにくいので、Amazon Web Service(AWS)の関連する製品群について整理しておきます。EC2 (Elastic Compute Cloud) EC2は、仮想マシンを時間単価で貸し出すサービスです。 EMRを使わずに、EC2に自前でHadoopをインストールして使うやり方もあります（EMRが出来る以前はそれしかなかった）。 EMRを使う場合でも、バックグラウンドでは自動的に
Rudy: Not your grandparents' EC2 deployment tool | Solutious Inc, the home of good natured tools.
Rudy is a development and deployment tool for Amazon EC2. Define infrastructure and processes using a powerful Ruby DSL* and Rudy takes care of the rest (like creating security groups and keypairs). env :stage do # Define an environment ami 'ami-e348af8a' role :app do # Define a role addresses '11.22.33.44' # Use elastic IPs disks do # Define EBS volumes path "/rudy/disk1" do size 100 device "/dev
Amazon EBSとRightAwsを使って自動バックアップ環境を構築する
Amazon EBSとは、EC2にアタッチする事の出来る外部ボリュームです。以下に素晴らしい解説記事があります。 Amazon EBSを活用してデータをバックアップしてみよう ～Amazon EC2/S3環境構築のすべて～（1/6）：CodeZine 要は外付けハードディスクなのですが、魅力的なのがボリューム毎に丸ごとバックアップが取れるという点です。これを定期的に実行しておけば、いざという時のバックアップになりますので、夜も良く眠れますw ※ちなみに、上記記事ではコマンドラインでの操作となっていますが、AmazonのGUIコンソールからもボタン一発でスナップショットが取れます。 バックアップは定期的に取らないと意味が無いので、自動化したい所です。自動バックアップの記事はいくつか見つけましたが、Ruby版が見つからなかったので自分で作りました。そのメモを残しておきます。 参考にさせていただ
Amazon EC2、EBS(Elastic Block Store)を使ってみた ｜ 横浜のホームページ制作 スタジオFIXの社長ブログ
ただのWebデザイナーですが、 Amazon EC2をバーチャルドメインで運用 できちゃったりしたので、 「ITコスト削減、万歳！」と唱えながら昨夜は家路につきました。 そして達成感とともに、ようやく恐怖感も芽生えてきました。 だって、Amazon EC2 のインスタンスって、 シャットダウンさせるとディスク上のデータが消滅しちゃんだよ？ 普通、マシンの電源をOFFにしてもデータは残りますよね？ 「全データ消去」って、どんだけーーーーーーー!! Amazon EC2 は、99.95%のサービスレベルを保証してくれているので 万が一、0.05%の確立で何かが起きても 運が悪かったで片付けられそうな気がしますが、 あたしくらいになると、自分でうっかり （しかも自信をもって堂々と）ポチっと削除しちゃう可能性の方が大きそう…。 そのために Amazon S3 という ストレージサービスが提供されて
http://collectivemeta.com/9bzrq
For full functionality of this site it is necessary to enable JavaScript. Here are the instructions how to enable JavaScript in your web browser.
dilshod's right_aws at master - GitHub
This repository is private. All pages are served over SSL and all pushing and pulling is done over SSH. No one may fork, clone, or view it unless they are added as a member. Every repository with this icon () is private. This repository is public. Anyone may fork, clone, or view it. Every repository with this icon () is public.
Amazon Web Services Developer Community : RightScale Ruby library to access Amazon CloudFront, EC2, S3, SQS, and SDB
RightScale's AWS gems provide Ruby interfaces to five key Amazon Web Services: CloudFront, EC2, S3, SQS, and SDB. The gems use Amazon's REST and query interfaces to provide full programmatic control. An optional HTTP layer retries and clears transient errors. These Gems have been used in production by RightScale since February 2007 and are continuously improved and updated with any new features of
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
STAR: Cluster - Home
United States
Google Code Archive - Long-term storage for Google Code Project Hosting.
right_aws/lib/ec2/right_ec2.rb at 199568b29ff85472007a065ed841b734667cb71f · flexera-public/right_aws
GitHub - grempe/amazon-ec2: WARNING : You probably don't want this code. Its archived and ancient and probably doesn't work. Try the official AWS Ruby SDK instead.
API_v1.4 - Eucalyptus
RightScale Forums - Powered by vBulletin
http://rightscale.rubyforge.org/right_aws_gem_doc/