Six Apart - Tech Talk Blog: 分散ファイルシステム MogileFS について
初登場になります、酒井といいます。 今回は Six Apart のサービスで使われている MogileFS というファイルシステムを紹介したいと思います。MogileFS については、日本語の情報はあまり…、というかほとんどない状況ですので参考にしていただければと思います。では早速。。。 MogileFS とは MogileFS とは、Perl で記述されているオープンソースな分散ファイルシステムです。 プロジェクトホームページ http://www.danga.com/mogilefs/ メーリングリスト http://lists.danga.com/mailman/listinfo/mogilefs 上記のホームページ内でも紹介されていますが、主に以下のような特徴があります。 アプリケーションレベルでの実装なので特殊なカーネルモジュールいらず。 ファイルを複数ホストに自動コピー / バ
MogileFSで構築する高速スケーラブルな分散ファイルシステム - builder by ZDNet Japan
本連載「オープンソースソフトウェアでクリエイターを支援するmoonlinx」の第1回「ウェブメディア「moonlinx」を支えるオープンソースソフトウェア」ではmoonlinxの概要およびシステム構成を、第2回の「openSUSEの管理ツール「YaST」で作業を効率化：moonlinxを支えるOSS」では使用OSであるopenSUSEについて簡単に説明しました。 今回は、moonlinxで取り扱うメディアファイル（画像、音楽、動画）の保管方法について説明したいと思います。 分散ファイルシステム「MogileFS」 moonlinxでは、各種メディアファイルの保管に、オープンソースの分散ファイルシステム「MogileFS」を利用しています。 分散ファイルシステムを用いることにより、ファイルシステムを構成するノード群の一部がダウンしても、データを失うことなくシステムとして機能し続け、かつ自動レ
CentOS5にOpenManage Server Administrator Managed Nodeをインストールしてみる
■ [CentOS] CentOS5にOpenManage Server Administrator Managed Nodeをインストールしてみる DELLのサーバにはハードウェアの状態が確認できるOpenManage Server Administratorというソフトウェアがインストールできるのですが、サポートされているのはWindows、RHEL、SUSEと当たり前なのですが有償OSしかありません。 しかし、RHELでインストールできるということは、CentOSでも動かせる期待が膨らみます。今回はCentOS5にOpenManage Server Administrator(OMSA) をインストールしてみて動くかどうか試してみたのでその覚え書き。同じような事をやっている方が検索すると出てきますけどねw 手順としてはこんな感じです。CentOS5は最小構成でインストールしている状態
Dell - Dell Linux - RAID & Storage
Dell and Linux: where low-cost and standards-based hardware meets low-cost and standards-based solutions. The new PERC 5 and PERC 6 RAID controllers use SAS (Serial Attached SCSI), and a new driver, megaraid_sas. The new SAS 5 and SAS 6 non-RAID controllers use a new driver, mptsas, part of the mptfusion driver family. Both drivers are included in kernel.org 2.6.x kernels, and have been backported
The Documents and Downloads Page Has Moved
Downloads Page is Offline (xLSI)
DELL PowerEdge RAID Controller (PERC) Information
The PERC5 and PERC6 are SAS (Serial Attached SCSI) RAID controllers from DELL which are actually special LSI MegaRAID SAS controllers. If you're running Linux there are exactly two ways of administrating your PERC: Either using DELL's OpenManage Server Administrator (OMSA) or struggling with the cryptic tools supplied by LSI. The former is a (some would say bloated) Java-based GUI managing and mon
EMC製品のログ取得方法一覧
すばやく簡単にご注文が可能 注文内容の表示、配送状況をトラック 会員限定の特典や割引のご利用 製品リストの作成とアクセスが可能
Googleによると、ハードディスクは温度や使用頻度に関係なく故障する
今まで一般的に信じられてきたハードディスクにまつわる常識として、 ・温度が高いと故障しやすくなる ・アクセス頻度が高いと多く動くため、故障しやすくなる というのがありましたが、Googleが10万台以上の民生用ハードディスクドライブを使用した調査を行った結果、温度やアクセス頻度に関係なく故障することが判明したとのこと。 そればかりか、ハードディスク障害の早期発見、あるいは故障の予測を目的として搭載されている「S.M.A.R.T.(スマート)」の値から得られるいつ故障するかどうかの予測もほとんど関係なかったそうです。 Googleはこれらの実際のデータによる結果に基づき、既存のSMART値から新しい故障予測方法を見つけ出すことが必要である、と結論づけています。 かなり衝撃的なGoogleによる調査結果は以下の通り。 Failure Trends in a Large Disk Drive P
第3回 ストレージを性能から理解する - ＠ IT
前回の「ストレージをデータ保護から理解する」では、ストレージの内部アーキテクチャ、データ保護、可用性、信頼性について解説した。今回は、ストレージの性能の考え方を解説する。 ハードディスクドライブの仕組みと性能の考え方 まず、ストレージの性能を理解するため、多くのストレージで記録媒体として採用されているハードディスクドライブ（HDD）の仕組みと性能の考え方について解説する。HDDは磁性体を塗布したディスク（プラッタ）を回転させ、移動するアームの先端に取り付けた磁気ヘッドによりデータを記録する（または読み取る）。プラッタは同心円状のトラックに区切られ、各トラックを回転方向に分割したセクタで構成される。なお、最近のHDDはプラッタの内周から外周にかけてトラックをいくつかのゾーンに分け、セクタ数を段階的に多く配置していくZBR（Zoned Bit Recording）方式を採用している。そのため、
ストレージを接続から理解する
RAIDグループ（またはRAIDセット） 物理HDDを組み合わせた１つの論理HDDを構成するグループ LUN（Logical Unit Number） サーバから1台の物理HDDとして認識される単位。RAIDグループから1つ、または複数に分割して作成する パーティション（スライス） 物理HDDを論理的に分割した区画（OS領域、アプリケーション領域、ユーザーデータ領域など） ファイルシステム OSが記憶装置に記録されるデータを管理する仕組み （WindowsではNTFS、FAT、UNIXではUFS、JFS、XFSなど、Linuxではext2、ext3、ReiserFSなど） LUNは、ストレージの世界で初心者にとって最もイメージがつかみにくい用語であり、本記事の後半部分にも登場するので、ここで一通り解説しておきたい。 RAIDグループ、あるいはRAIDセットと呼ばれるものは、ディスクドライブ
最大容量2TBで書き込み速度は毎秒1.3GB、前代未聞の超高速SSD「RAIDDrive」
以前GIGAZINEで1TBの容量と毎秒700MBを超える転送速度を実現したSSD「Z DRIVE」が登場したことをお伝えしましたが、それを圧倒的に上回る最大2TBの容量と毎秒最大1.3GB（1300MB）の転送速度を実現した、とんでもないSSDが発表されました。 詳細は以下の通り。 Super Talent Develops 2048 GB PCIe RAID SSD with 1.3 GB/sec Throughput このリリースによると、SSDメーカーのSuper Talentが最大2TBの大容量と毎秒最大1.3GBの高速転送を実現したSSD「RAIDDrive」を発表したそうです。 「RAIDDrive」は最大2TBのSLC（シングルレベルセル）またはMLC（マルチレベルセル）タイプのフラッシュメモリをサポートしており、高速転送に対応したキャッシュメモリを搭載。さらにハイエンドモ
LinuxのファイルI/Oチューニングに使える「Iotop」 - GIGAZINE
ファイルI/Oがパフォーマンスのボトルネックになっていることはなんとなくわかるが、具体的にはどうなっているのかを知りたい場合、通常はvmstatやiostatなどを使うわけですが、この「Iotop」を使うと、いわゆるtopコマンドのような感じで表示してくれるので、ケースによってはかなり状況を把握しやすくなり、非常に役立ちます。 詳細は以下。 Iotop's homepage http://guichaz.free.fr/iotop/ 中身はPythonで書かれており、Python2.5以上とLinuxのカーネル2.6.20以上で動作します。 画面はこんな感じ あと、ディスクI/O関連は以下のページも参考になります。 Linux I/O のお話 write 編 - naoyaのはてなダイアリー Linuxチューニング 第2部第3回 ハード・ディスクをチューニング（その1）：ITpro
Linux、クラスタ、1Uサーバのクラスターコンピューティング(株) - Intel 爆速SSD X25-Eの実力 - RAIDベンチマーク
最近フラッシュメモリを利用したSSD(Solid State Drive)が注目を集めて います。 SSDは駆動部品を持たないため、HDDに比べ高速で、低消費電力であることが 期待されています。 なかでもIntelのSLC(Single Level Cell)タイプSSD、X25-Eは、公称性能で シーケンシャルRead 250MB/s、シーケンシャルWrite 170MB/sといった性能を 持つ爆速SSDです。 前回X25-Eの単体性能を評価し、カタログスペック通りの性能を測定する ことができました。 今回はそれに引き続き、RAID構成時の性能を評価したところ、RAID0(4台)で最高でRead 1.0GB/s、Write 821MB/sという、驚異的な性能を 叩き出しました。 高速にデータを読み書きする必要があるデータベースサーバや、映像コンテ ンツの編集用の
導入事例：株式会社ドワンゴ | HPE 日本（日本ヒューレット・パッカード株式会社）
今までにない要件をストレージに求める新たなサービス。管理すべきファイルは大容量の動画コンテンツであり、将来的なユーザー数やトラフィックの増加も予想できないが、最初のコストは抑えたい。そういった柔軟な対応が求められるサービスの基盤として、ドワンゴは「ニコニコ動画」のストレージにHP StorageWorksを採用した。容量とスループットのそれぞれを柔軟に拡張できるため、今後も拡大を続けるサービスにも「当面は大丈夫」との見通しだ。
Linux、クラスタ、1Uサーバのクラスターコンピューティング(株) - 1プラッタHDDの読み書き性能測定
※これ以降、ST3320613ASを320GB HDD、ST3250410ASを250GB HDD、ST380815ASを80GB HDDと表記します。 (参考) Seagateの型番は、番号自身がそのHDDの情報を表しています。 以下がその見方です。 キャッシュ容量の数字は、6=>16MB、8=>8MB、2=>2MBとなっています。 またインターフェイスの記号については、AS=SATA、NS=ES-SATA、A=Ultra-ATAとなっています。 それ以外は数字そのままになっています。 (参考) AKIBA PC Hotline! Junk Blog.: 店頭で見る「HDD型番の読み方」 Seagate: モデルナンバーの解釈の仕方(英語) 計測方法 (1) 計測するHDDを装着し、PXEブートで起動します。 すべてメモリ上で動作するので他のプログラムがHDDにアクセスしないようにな
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://labs.cybozu.co.jp/blog/kazuho/archives/2008/11/_ssd.php
Engadget | Technology News & Reviews
IT news, careers, business technology, reviews