グーグルが「Google File System」次期バージョンを開発中 － Publickey

グーグルが独自に開発した分散ファイルシステム「Google File System」（GFS)。GFSには、グーグルがクローラが集めてきた大量のコンテンツ、GMailなどの利用者が保存する大量のファイル、 Google Mapsなどが表示する大量の画像など、想像を絶するほど大量のデータが保存されています。 GFSは約10年前に開発され、その後改良を加えられてはきましたが、いくつかの弱点が表面化してきています。それらの弱点を克服するために現在グーグルでは GFSの次のバージョンを開発中で、開発責任者であるSean Quinlan氏へのインタビューが、米国の計算機学会であるACMのWebサイトに掲載されています。 GFS: Evolution on Fast-forward また、そのインタビューの概要がニュースサイトRegisterの記事「Google File System II: Daw

[schrift]

　「検索結果のランキングを計算するような処理であれば、処理がエラーになって結果が出るのが半日遅れたとしても目立った問題にはなりません。しかし、人が利用するアプリケーションの場合にはそうは行きません」。

[oooooooo]

シングルマスターシステム / チャンクの大きさが64MB固定

[tarchan]

GFSの弱点はシングルマスターで、チャンクが64MB固定なところ

[f_oggy]

Googleの屋台骨を支えるファイルシステムの話

[gungle]

時代のニーズに応じて、さらに進化するGFS。

[ken47]

とりあえずクリップ。

[inurota]

しかしこの辺りになると、通常はプロトタイプ（あるいはアークテクチャ）設計・開発⇒プロダクションコピーなのが、唯一のプロトタイプ開発で地球が充足してしまうという。

[hiromark]

どんな設計になるのか追加情報が楽しみでもある。

[takeshiketa]

おもしろーい

[fukken]

移行したら、旧GFS丸ごと公開とかしてくれないかなぁ。無理か。

[kdaiba]

新しいGFS