タグ

lustreに関するzeemoreのブックマーク (3)

  • Lustreファイルシステムの概要

    Lustreファイルシステムの概要 藤原 樹,廣安 知之,三木 光範 ISDL Report No.20040803002 2004年 6月 28日 Abstract 報告ではLustreファイルシステムの概要について調べる.Lustreファイルシステムとは既存のNFSやAFSのような分散ファイルシステムでは対応できない大規模クラスタなどのシステムのために開発されているオープンソースの分散ファイルシステムである. 1  はじめに 近年,並列計算に用いられるクラスタが大規模化し,クラスタを構成するノード数が増加している.クラスタにおいて広く用いられている分散ファイルシステムのNFS,AFSを用いた場合,NFSサーバ1台に対してNFSクライアントが複数マウントするため,マウントするノード数の増加に伴いサーバに対する負荷が増大し,I/Oスループットが低下してしまう.また膨大な計算結果を出力する

  • 「ハリー・ポッター」シリーズに投入されたLustre | OSDN Magazine

    「ハリー・ポッター」シリーズ最新作、『ハリー・ポッターと炎のゴブレット』で不気味な特殊効果の大半を担当したアニメ制作会社、Framestore CFCのレンダリング・ファームではIntelベースの強力な高速Linuxクラスタが稼働しているのにNFSサーバーのボトルネックのせいで不具合に見舞われることがあった。そこで(ハリー・ポッター風に)Lustreよ来たれと相成り、オープンソースのクラスタ・ファイル・システム、Lustreが、大手と張り合える価格で同社の並外れた欲、すなわちI/O要求を満たすことになった。 制作スタジオでLinuxを使うのは今や珍しくないが、Framestoreはその先駆けに名を連ねていた。Framestoreが船出した6年前はUnixサーバーが主流で、「Windowsマシンもパラパラあったようだ。我々がLinux路線を選ぶのにそれほど時間はかからなかった」とFrame

    「ハリー・ポッター」シリーズに投入されたLustre | OSDN Magazine
  • クラスタファイルシステム「lustre」を触ってみます : DSAS開発者の部屋

    負荷分散環境では必須ともいえるネットワークストレージですが、皆様の環境ではどのようなものをお使いでしょうか。 「ファイル共有なんてなくしてしまえっ!!」って言いたくなることも時々あったりしますが(笑)、画像などの素材データ類はDBに格納するよかファイルとして扱う方が運用上楽だったりするので、そう簡単に抹殺するわけにもいきません。 DSASではDRBDで冗長化したNFSサーバ(もちろんLinuxベース)をネットワークストレージとして使っていますが、構成上どうしても特定のサーバに負荷が集中しがちになるのが悩みの種です。 特にせっぱ詰まって困ってる訳ではないのですが「どーしたもんかなあ」と物思いにふけっていると、いつもお世話になっている協力会社の方から「lustreってのもあるよん」と教えてもらったので軽く調べてみました。これはなかなか楽しそうなクラスタファイルシステムじゃあないですか! lus

    クラスタファイルシステム「lustre」を触ってみます : DSAS開発者の部屋
  • 1