オープンソースで構築するグリッドコンピューティング·GridGain MOONGIFT
コンピュータの高性能化と低価格化に伴って、世の中には無数のコンピュータが存在するようになった。全力で動いてロードアベレージが常に高いマシンもあれば、殆ど休眠状態のマシンもあるだろう。一台の超高性能なマシンを使うよりも、そのような休眠状態のマシンをつなげてパラレルに計算処理を行わせる方が価格も安く、耐久性も高くなるかもしれない。 サーバ実行中 そのようなパラレルな計算処理を可能にするのがグリッドコンピューティングだ。その基盤となるソフトウェアがGridGainになる。 今回紹介するオープンソース・ソフトウェアはGridGain、Java製のグリッドコンピューティングだ。 GridGainは汎用的なグリッドコンピューティングシステムで、Eclipseを使ってライブラリを読み込み、実行処理をグリッドコンピューティングに行わせるデモムービーが提供されている。一つのマシン上でノードを複数立てられるよ
高性能分散ストレージシステムHypertable、オープンソースプロジェクトに - builder by ZDNet Japan
EDRトップランナー対談：後編 セキュリティ戦略を転換せざる得ない背景と EDRのような手法が必要な理由に迫る クラウドネイティブの実現 モダンインフラの構築・運用の課題解決へ コンテナの可能性を広げるVMware Tanzu ライバル同士がタッグを組む理由 マイクロソフトとヴイエムウェアが連携し パブリッククラウドへの移行を支援 ビジネスのためのデータ基盤構築 DX時代の企業成長はデータ活用が鍵 新たな展開を後押しするSQL Server活用 セキュリティモデルは変わった！ クラウド活用、リモートワークはあたりまえ いま求められるゼロトラスト実現のために IT部門のDXはこれだ！ IT運用管理新時代における最適な運用管理 の現場作り コンテナをエンプラITに！ コンテナ活用の基礎 本番実装が増える背景とメリット 特集：セキュリティトレンド-秋- つながる世界で問われる対応 サプライチェー
AmazonのSimpleDBとIBMのBlue CloudがCloud Computingの発展を促す
最近ソフトウェア業界のクラウドコンピューティングの領域はかなり多忙であった。今週初旬にAmazonは構成されたデータ上のクエリをリアルタイムで動作させるためのWebサービスであるSimpleDBのベータ版を発表した(source)。SimpleDBはAmazonの他のコンピューティングサービスである、S3 AmazonとAmazon EC2を補完したものになっている。この発表はIBMがBlue Cloud(source)のイニシアチブを発表した約1ヵ月後に行われた。この二つは両方ともプライベートのインフラストラクチャ使用する事からコンピューティングリ ソースのようなユーティリティを使用する事への移行において大きな役割を果たすかもしれない。可用性のみならず、コンピュータ初等教育と定評あるソフトウェアエンジニアも、またトレンドに影響を与えている。 10月にIBMとGoogleは大学向けインター
大規模分散処理向けの国産“ウェブOS”をRubyで開発中 − ＠IT
2007/11/26 2007年11月24日、「楽天テクノロジーカンファレンス2007」において、Ruby言語の開発者で楽天技術研究所フェローのまつもとゆきひろ氏は、開発中の大規模分散処理基盤「Roma」（ローマ）と「Fairy」（フェアリー）のコンセプトを語った。研究段階ではあるものの、米グーグルなど世界トップクラスのネット企業だけが持つ大規模分散処理技術に真っ向から挑戦する試みだ。 米グーグル、米ヤフー、米アマゾンなど世界トップクラスの大手ネット企業は、巨大なトラフィックに対処するため、大規模データセンターの信頼性、可用性、性能などを確保する大規模分散処理基盤の研究開発を進めている。最近では、こうした大規模分散処理基盤は“ウェブOS”と呼ばれることもあり、注目を集めている。つまり世界トップクラスのネット企業は“ウェブOS”を自社開発しているわけだが、楽天でも国産の“ウェブOS”が生まれ
【クラウドコンピューティング】次のパラダイムシフト？ 「クラウドコンピューティング」とは
このところ、「クラウドコンピューティング」（cloud computing）という言葉を、よく見かけるようになった。つい先週もIBMとGoogleが、大学向けのクラウドコンピューティングを推進する「Academic Cluster Computing Initiative」を発表している。「Web 2.0」に続く流行語になりそうな予感だ。 クラウドは、“インターネットの雲”を指し、ネットワークを雲の図で表すことから来ているという。クラウドコンピューティングをインターネットの“あちら側”と表現する人もいる。 インターネット常時接続が普及して、さまざまな処理がサーバー側で行われるようになった。ユーザーのデスクトップで動いていたアプリケーションはサーバー側に、データはデータセンターに移動する。クラウドコンピューティングは、こうした環境を言う。アプリケーションをWeb経由で利用するSaaSと同じよ
Amazon's Dynamo - All Things Distributed
Amazon's DynamoOctober 02, 2007 • 4557 words In two weeks we’ll present a paper on the Dynamo technology at SOSP, the prestigious biannual Operating Systems conference. Dynamo is internal technology developed at Amazon to address the need for an incrementally scalable, highly-available key-value storage system. The technology is designed to give its users the ability to trade-off cost, consistency
Amazon Dynamo – スケーラブルなハッシュテーブルWebサービス | 秋元@サイボウズラボ・プログラマー・ブログ
via O’Reilly Radar Amazonが来週ACMで話すというDynamoというサービスが面白そうだ。 Amazonのウェブサービスは、たとえばS3は「ファイルを置いて、取り出せる」だけだし、EC2はサーバ一台分だけ見ればただのVPSホスティングサービスだ。だけど、必要に応じて支払いを増やすと、好きなだけスケールさせられるし、不要になれば減らすのも簡単なことから、ネットサービスの運営者が固定費について悩まなくて済むようになるという点で便利だし、そんなサービスを提供するにはたいへんな技術力が必要だということはわかる。 Dynamoも同じで、「キーと値のセットを保存して、取り出せる」、とこれだけ。数が少なければスクリプト内の連想配列とシリアライズでも済みそうな機能だけれど、これを複数サーバに分散させて、たいへんな数のキーを突っ込んでも問題なく動作することを保証したサービス、となるら
グーグル、無限への挑戦：日経ビジネスオンライン
気になる記事をスクラップできます。保存した記事は、マイページでスマホ、タブレットからでもご確認頂けます。※会員限定 無料会員登録 詳細 ｜ ログイン Stephen Baker （BusinessWeek誌シニアライター、ニューヨーク） 米国時間2007年12月13日更新 「Google and the Wisdom of Clouds」 「データ量が今の1000倍になったとしたら、君ならどうする？」 この質問をされると、それまで自信満々で入社面接に臨んでいた若者はしどろもどろになってしまう。 今や超難関、米グーグル（GOOG）の採用面接でのひとコマである。質問を投げかけるのは、上級ソフトウエアエンジニアのクリストフ・ビシグリア氏（27歳）。ほっそりとした体格と、ウエーブのかかった長髪のビシグリア氏が試しているのは、目の前にいる大学生が「グーグラー（グーグル社員）」流の発想法について来られ
En Yüksek Kur Paykasa Bozdurma
IBM TechXchange Community Join the Community and get 30% off the TechXchange Conference. Join / Log in Where is my content? If you’re looking for developerWorks content or a Support forum and ended up here, don't panic! You are in the right place. The content you're looking for. This page will help you find the content you are looking for, get answers to your questions, and find a new community to
)
Running Hadoop On Ubuntu Linux (Multi-Node Cluster) - Michael G. Noll
What we want to do In this tutorial, I will describe the required steps for setting up a multi-node Hadoop cluster using the Hadoop Distributed File System (HDFS) on Ubuntu Linux. Hadoop is a framework written in Java for running applications on large clusters of commodity hardware and incorporates features similar to those of the Google File System and of MapReduce. HDFS is a highly fault-tolera
大規模分散処理基盤プロジェクトにRubyで挑戦--まつもとゆきひろ氏 - builder by ZDNet Japan
ITインフラ運用からの解放 HCI＋JP1による統合運用による負荷激減で 次世代IT部門への役割変革へ一歩前進 日清食品グループのDX（後編） 内製化とローコードで実現？ビジネス部門 によるアプリ開発のリアルボイス！ 体験から学んだ成功への知見 マネーフォワード×エム・フィールド対談 Fintechプラットフォーム開発の「鍵」 ゼロトラスト対策3つのポイント ニューノーマル時代に必須なゼロトラスト セキュリティの始め方 単純なインフラ製品の販売ではない DX、コンテナプラットフォームの実証など 自社の取り組みで得られた知見を顧客に提案 ともにDXを推進する コンテナ化されたワークロードを管理 継続的な価値を生みだす「協創」への挑戦 データ活用は次のステージへ トラディショナルからモダンへ進化するBI 未来への挑戦の成功はデータとともにある クラウドネイティブの実現 モダンインフラの構築・運
Hadoop HBase part3 - kuangueの日記
ということで，HBaseについて． 最近，Hadoop内でも特に活発に開発されているHBaseについてです．これは，Google Bigtableの再実装ですね．HBase Architectureを読んでみたまとめを書いておきます．第3弾です．このエントリで翻訳は終了です． HBase Master Server それぞれのHRegionServerは，一つのHMasterにコンタクトし続けます．HMasterは，それぞれのHRegionServerに対して，どのHRegionをロードし，制御可能にしなければいけないかを通知する責任を持ちます．HMasterは，集計表を管理します．これは，どのHRegionServersが有効かを示します．もし，HRegionServerとHMasterの接続がタイムアウトになった場合， 1.HRegionServerは自分自身をkillし，空の状態で再
Log In - Apache Software Foundation
Powered by a free Atlassian Confluence Open Source Project License granted to Apache Software Foundation. Evaluate Confluence today. Čeština Dansk Deutsch Eesti English (UK) English (US) Español Français Íslenska Italiano Magyar Nederlands Norsk Polski Português Română Slovenčina Suomi Svenska Русский 中文 日本語 한국어 Powered by Atlassian Confluence 7.19.25 Printed by Atlassian Confluence 7.19.25 Report
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://209.85.163.132/papers/bigtable-osdi06.pdf
MapReduceとHadoopの将来について、YahooのDoug Cuttingにインタビュー
MapReduceが牽引～Amazon EC2をサポートするEclipseプラグインがリリース
http://tech.kuangue.sunnyday.jp/?cid=27856
http://blogs.sun.com/Gregp/entry/the_world_needs_only_five
Hbase/RDF - Hadoop Wiki
Googleライクなオープンソースインフラストラクチャ「Hadoopプロジェクト」が弾みをつける