タグ

jbodとJBODに関するyassのブックマーク (6)

  • RHEL6のマルチキューで効率的なネットワークの付加分散

    すばやく簡単に注文します 注文を表示して配送状況を追跡します 製品リストの作成とアクセス 「Company Administration(会社情報の管理)」では、お使いのDell EMCのサイトや製品、製品レベルでのコンタクト先に関する情報を管理できます。

    RHEL6のマルチキューで効率的なネットワークの付加分散
    yass
    yass 2014/11/15
    " 13GサーバのRaidコントローラは、PERC9 (PowerEdge Raid Controller 9)と呼ばれ、前世代(PERC8)と比べ、パフォーマンスの大幅向上、 JBOD (Non Raid 構成) のサポート、12Gbps SAS対応、PCIe Gen3.0 サポートなど、大幅にパワーアップしています "
  • JBOD VS multiple directory on dfs.datanode.data.dir in CM

    yass
    yass 2014/02/22
    " Don't set your disks as a single logical volume. Use them as JBOD and specify one mount point for each disk. "
  • dfs.datanode.failed.volumes.toleratedとdatanodeのdecommission - wyukawa's diary

    HDFSにはdfs.datanode.failed.volumes.toleratedという設定項目があります。defaultは0。 <property> <name>dfs.datanode.failed.volumes.tolerated</name> <value>0</value> <description>The number of volumes that are allowed to fail before a datanode stops offering service. By default any volume failure will cause a datanode to shutdown. </description> </property>内容は下記に詳しいです。 By default, the failure of a single dfs.data.dir

    dfs.datanode.failed.volumes.toleratedとdatanodeのdecommission - wyukawa's diary
    yass
    yass 2014/02/22
    "dfs.data.dirに複数のディレクトリを指定 / dfs.datanode.failed.volumes.toleratedに1を設定すると2つ以上のディレクトリに障害が発生しない限りはdatanodeは動き続け / 復旧した場合に再度そこに書き込むようにするにはdatanodeを再起動"
  • JBODはややこしい

    カイワレ先生のブログを見て、自分のメモがてら、JBODについて書いてみます。 JBODって、なんぞやって、日人なら誰もが一度は考えると思うからです。(RAID0と何が違うの?って) 現状、JBODという言葉は非常に曖昧な言葉です。 日wikipediaにも3つ定義があります。 1.JBOD機能を持つRAIDコントローラカードを取り付けて、JBODにしたいハードディスクをRAIDコントローラカードに接続する。 2.JBOD用として製造されたディスクアレイ製品をSCSIやファイバーチャネル等のインターフェースに接続する。 3.すでに接続されている複数のハードディスクを、ソフトウェア的に統合してJBODとする(Windows NT系列のOSには「スパン」という名称でこの機能が標準装備されている)。 http://ja.wikipedia.org/wiki/JBOD より。これはこれで微妙な

    yass
    yass 2014/02/22
    " ハードウェアベースのJBODも2つの意味があります。1つは、「束ねられたディスク群」という意味のJBOD。もうひとつは「物理ディスクが別々の論理ボリュームにマッピングされて、並列書き込み可能な状態(仕組み)」"
  • http://infra-engineer.com/hadoop/hadoop%E8%B1%A1%E6%9C%AC%E7%AC%AC2%E7%89%88-9%E7%AB%A0-%E3%80%8Chadoop%E3%82%AF%E3%83%A9%E3%82%B9%E3%82%BF%E6%A7%8B%E7%AF%89%E3%80%8D%E3%81%AE%E3%81%BE%E3%81%A8%E3%82%81/

    yass
    yass 2014/02/21
    " HDFSのJBOD構成では、すべてのディスク間でHDFSブロックをラウンドロビンで配置 / JOBD構成においてディスクの障害が発生した場合でも、HDFSは障害の発生したディスクを除外して動作を続けることができる"
  • Hadoop SlaveサーバとJBODとRAID - カイワレの大冒険 Second

    夏はビールがことごとくうまいなと感じる@masudaKです。 少し前にHadoop専用サーバの環境構築をする機会に恵まれたのですが、ディスク構成をどうするかでわりと目新しいことばかりだったので、備忘録も兼ねて文字に起こしておきます。 前提として、HadoopのMasterではJobTrackerとNameNodeが動いて、SlaveではTaskTrackerとDataNodeが動いてるとします。DataNodeが動くSlaveはクラスタ構成になっていて、HDFSによってデータが分散・冗長化されているとします。 今回の記事ではジョブのデータを読み書きし、IOに対するケアが必要なSlaveのディスク構成を対象とします。Masterはメタデータなど大事なデータは保存してますが、読み・書きの量は少ないのと、単にRAID1で組んでおけば、ディスクに対するケアはそこまで必要ないので、この記事では取り上

    yass
    yass 2014/01/28
    "JBODの利点は僕には現時点でメリットが見られなかったのが現状です。ここでいうJBODというのは、単にディスクをつなげたJBODと呼ばれるもの / RAID0のVirtual DiskをRAID0で複数設ければ、OSから見たディスクは分割されてます"
  • 1