タグ

dfsに関するtoshifusa1423のブックマーク (9)

  • 分散ファイルシステムのGlusterFS:こんなとき、どうなる

    企業で処理するデータ量が爆発的に増加している。かつて企業内の大量データというと、データウエアハウス(DWH)やビジネスインテリジェンス(BI)で取り扱う定型データの集まりのことだった。しかし現在では、それらに加えてオフィスソフトの文書データやWebサーバーで配信するテキスト、画像、音声などの非定型データも大量に扱うようになった。 こうした背景から、「ビッグデータ」と呼ばれる、データの急激な増大傾向に対処する方策が求められている。しかも、限られた予算の中で実現でき、かつ効率よく運用できる仕組みでなければならないケースがほとんどである。 このようなニーズに応えられる、スケーラビリティを備えた分散ファイルシステムが注目されている。そこで、そうした分散ファイルシステムの一つであるGlusterFSについて、「拡張性」「可用性」「性能」の検証を行った。 ネットワーク上のストレージを集約 Gluste

    分散ファイルシステムのGlusterFS:こんなとき、どうなる
  • 分散ファイルシステムでググってみた: Akito's IT技術 メモ

  • 分散ファイルシステム GlusterFS を使う

    分散ファイルシステム GlusterFS を使う - このコンテンツは新サイトに移動しました

    分散ファイルシステム GlusterFS を使う
  • STF Distributed Object Storage - Home

    Distributed Object Storage Made Easy! Use commodity hardware/software to build your own scalable object storage! Learn more » What is STF? STF is a simple, yet very scalable distribute storage system. STF powers sites like livedoor Blog, loctouch and many more, serving gigabytes after gigabytes of data. On one such system, it's serving 400Mbps of image at peak hours without a hitch. GET STF! STF i

  • GlusterFS技術情報

    GlusterFS に関する技術情報を掲載しています。 ここに記載の情報は、基的には、GlusterFS 3.3をベースとしています。GlusterFS 3.4での機能拡張予定については、こちらを参照ください。 「Red Hat Storage Server」は、GlusterFSの安定版をベースとしたレッドハットの商用ディストリビューションです。Red Hat Enterprise Linuxを同梱したソフトウェアアプライアンスとして提供されます。 Red Hat Storage Serverの利用にあたっては、事前に下記の技術情報をご確認ください。 Red Hat Storage Server 2.0 Supported and Recommended Workloads サポート/推奨される使用方法、および推奨されない使用方法が記載されています。 Red Hat Storage S

  • GlusterFSでクラスタFSを作る

    INSANEWORKS,LLC What You Need Is What You Get!! Hostname: 133.242.243.6 IP Addr: 133.242.243.6 Kotaです。 Linuxクラスタ上のファイルシステムはGFS/ocfs/Cephやら色々出てて正直どれを使っていいか、、と、ざっくり調べた所かいつまむとこんな感じのようです。 GFSはFC-SAN有りの大規模向け OCFSは歴史ありだがKernelにMergeされていない Cephははじまったばっか pNFSはNFSベースだけど実績不明 みたいなところです。 で、先日ひょんなとこからGlusterFSを知りました。 GlusterFSはBlockDeviceではなく、UserLandで動作するFSベースの分散ファイルシステムです。 自動復帰、ミラーリング/ストライピング 結論から言うとファイルの配布や

    GlusterFSでクラスタFSを作る
  • Gluster

    Gluster is a free and open source software scalable network filesystem.

    Gluster
  • Home - Ceph Wiki

    On June 2021, we’re hosting a month of Ceph presentations, lightning talks, and unconference sessions such as BOFs

    Home - Ceph Wiki
  • drbd.conf

    ストレージには寿命があり、保存された情報は永遠に正常性を保証されるわけではありません。その為に別のストレージにデータをバックアップしたり、ストレージそのものを多重化してデータを保護することが重要です。今回紹介するは、ストレージデバイスを多重化し、データを複数のストレージに保存する仕組みで、DRBD(Distributed Replicated Block Device)と呼ばれているものです。同様の仕組みにソフトウェア/ハードウェアRAIDがあります。 DRBD(Distributed Replicated Block Device)とは、TCP/IPネットワークを通じて複数のサーバのストレージ(パーティション)をリアルタイムにミラーリング(複製)するソフトウェアです。RAID1のようなミラーディスクを構築することができます。ソフトウェア/ハードウェアRAIDは同じサーバ内のストレージを使

  • 1