タグ

GFSに関するoresama-kingのブックマーク (1)

  • Perl Tips | Google File System (GFS) とは(GFS の論文)

    以下にリンク論文がある。 https://labs.google.com/papers/gfs-sosp2003.pdf語の解説は Google File System(GFS)技術メモ が詳しい。以下、私も重要だと思ったポイントを挙げておこう。 (システム構成) マスター、チャンクサーバ 、クライアントの3種類。基的に安いPCでシステムが構築できるようにしている。 PC は壊れる(信頼はしていない)のが前提のもとにシステムを設計している。 チャンクサーバにデータを格納する。 データは可用性向上(万一のため)3つのチャンクサーバに格納している。チャンクサーバが同じ電源を使っていたりしたら全部データが飛ぶ可能性があるので、さすがに別のラックのチャンクサーバ同士に保存するとか、空きディスク容量が多いチャンクサーバ(すなわち新品)へ、とか考慮している。データは基的に64MBの固定長。分

  • 1