オープンソース分散システム『Hadoop』の解析資料を公開
平成20年8月25日 お知らせ 株式会社 Preferred Infrastructure NTTレゾナント株式会社 オープンソース分散システム『Hadoop』の解析資料を公開～ 株式会社 Preferred Infrastructure（*1、本社：東京都文京区、代表取締役： 西川徹、以下 Preferred Infrastructure）は、NTTレゾナント株式会社（*2、本 社：東京都千代田区、代表取締役社長：中嶋孝夫、以下NTTレゾナント）と共同 で行った、オープンソース分散システム『Hadoop』に関する調査、及び解析資料 を広く公開します。 『Hadoop』はGoogle Inc.(本社：米国カルフォルニア州、CEO：エリック Eシュ ミット）の大規模データ処理基盤技術として論文等で公開されている「Google File System」と「MapRedu
分散ファイルシステム2つを比べてみる « SawanoBlog.
関西レンタルサーバ会関連の方にHadoopというのを教えていただいた。 えらく感動したので、分散ファイルシステム(Distributed File System：以下DFS)について自分の理解を含めて記事に。 DFS、基本は「名前空間管理機構＋実ファイル格納場所」 DFSは仮想的なディレクトリツリーを管理して、実ファイルの場所を知っている"名前空間管理サーバ"と、実際のファイルデータを格納する"実データサーバ"から構成されている。 ※呼び方は一般的を目指した適当です、実データのほうはソフトによって ターゲットサーバ とか チャンクサーバ とか呼ばれます。 クライアントはファイルのパスを "名前空間管理サーバ" に問い合わせ、実際のファイルデータ格納先にデータを取得しにいくという動き。 DNSの名前解決や仮想メモリのマッピングがよく似ている。それどころか単一HDD(FilrSyst
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
