glusterfsで仮想化サーバの余っているローカルハードディスクを分散共有ストレージにする at nkjmkzk.net
Virtualization, Operating System, Storage, Cloud Computing仮想化サーバが数台あると共有ストレージをつないで仮想マシンを全仮想化サーバで共有したくなります。 そうすることによって仮想マシンはリソースが空いていればどの仮想化サーバ上で起動させることができ、起動後もLive Migrationで別の仮想化サーバ上に移動させることさえできます。なのである程度の規模になると仮想化サーバ数台 + 共有ストレージという構成が一般的となります。 こうなってくると仮想化サーバのローカルハードディスクはほとんど使われません。サーバの故障率を下げるためにSANブートにしたりするとさらにローカルハードディスクは全く使わないことになります。それはそれですっきりしいると言えばそうなのですが、せっかくのローカルハードディスクが無駄になっている気もします。もし、共
Ext4, ついに安定版リリース at nkjmkzk.net
Oracle, Open Source, Private12/24にLinux kernel 2.6.28がリリースされました。このリリースの目玉としてExt4実装があります。Ext4はExt3と互換性を保ちながらも多くの改良がなされたものになっているようです。kernelnewbies.orgに記載されているNew featureを意訳してまとめてみました。 互換性 既存のExt3ファイルシステムはExt4にリフォーマットすることなく移行可能。具体的には該当ボリュームをReadOnlyでマウントしていくつかコマンド叩くだけでOK。 より大きなファイルシステムサイズ、ファイルサイズのサポート Ext3からExt4ではそれぞれの制限は以下の通り。 ファイルシステムサイズ：16TB -> 1EB (エクサバイト） ファイルサイズ：2TB -> 16TB ちなみにEBとは、 (1 EB = 10
Tuning ext4 for performance with emphasis on SSD usage
The obligatory disclaimer: The more performance you gain, the more data integrity you loose! But if you want to tune something like a file system, I strongly assume that you know what you are doing :) These tips apply to all major Linux distributions like Fedora/Red Hat, OpenSUSE, and Ubuntu that are already using ext4 or are going to make ext4 their default file system. As write operations on Sol
フロントエンドの負荷その2 - rougeref’s diary
構成をがらっと変えるといろんなことが起きますね。まぁ覚悟はしていましたが。昨日updatedbの対象ディレクトリからキャッシュディレクトリを外しましたがそれでもCPU負荷はさほど下がりませんでした。Load Ave.で7とか8くらいまでいきます。CPU2発のマシンなので結構な負荷。 なにが食ってるのかなぁと調べるとkjournaldですね。多分。そうか、ジャーナルか。キャッシュファイルなんかジャーナリングしなくていいんだけどな。おまけにここの情報だとext2,ext3はディレクトリ内のファイル探査が線形だから、ディレクトリ以下にファイルがたくさんあるようなキャッシュディレクトリには向いていないようです。注意するところはこんなところかな。 キャッシュディレクトリの文字数を2にする。 CacheDirLengthの値を2に。デフォルトの3だと、ディレクトリが作れなくなる可能性あり。 キャッシュ
Lustreファイルシステムの概要
Lustreファイルシステムの概要 藤原 樹，廣安 知之，三木 光範 ISDL Report No.20040803002 2004年 6月 28日 Abstract 本報告ではLustreファイルシステムの概要について調べる．Lustreファイルシステムとは既存のNFSやAFSのような分散ファイルシステムでは対応できない大規模クラスタなどのシステムのために開発されているオープンソースの分散ファイルシステムである． 1 はじめに 近年，並列計算に用いられるクラスタが大規模化し，クラスタを構成するノード数が増加している．クラスタにおいて広く用いられている分散ファイルシステムのNFS，AFSを用いた場合，NFSサーバ1台に対してNFSクライアントが複数マウントするため，マウントするノード数の増加に伴いサーバに対する負荷が増大し，I/Oスループットが低下してしまう．また膨大な計算結果を出力する
lustre - 詳解ファイルシステム
詳解ファイルシステム Linuxのファイルシステムを詳解します トップページページ一覧メンバー編集 lustre 最終更新： linuxfs 2007年01月02日(火) 11:49:37履歴 Tweet FrontPage 詳解Lustre 詳解Lustre Lustreとは Lustreの特徴1 Lustreの特徴2 Lustreの特徴3 lustreの使い方詳解 その他諸元(2006/03/28 現在) Lustreとは Lustreとは、Cluster File Systems, Inc.がGPLに基づいて配付している、クラスタファイルシステムです。~ POSIXに準拠しています。~ ライセンス : GNU GPL~ 作者 : Cluster File Systems, Inc.~ ホームページ : http://www.lustre.org/ ~ https://mai
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
mpiFileUtils - Parallel file utilities for HPC
Linuxファイルシステム技術解説
https://lowlife.jp/yasusii/stories/20.html/