ZFSはRAIDと相性が悪い
日本最強の看板を下ろしたミラーサーバftp.jaist.ac.jpの管理者の一人が、 このサーバにまつわるよしなしごとを語ります。 English versions of some posts on another blog. Sun Fire T2000には最初、2GbpsのFibre Channelに対応したSATAのディスクアレイを2基つないでいました。それぞれ14D+1P+1SのRAID 5にして、2つのvdevでZFSのpoolを1つ作りました。これはRAID 5+0に相当します。 しかし、この構成はまったく性能が出ませんでした。負荷がほぼ100%のときにディスクアレイ1基あたりで約20MB/sしか出ません。1基20MB/sなら2基合わせて40MB/s、ビットにすると320Mbps、ARCの助けを借りても、ftp.jaist.ac.jpの出力帯域は450Mbpsがいいところでした
Xenのイメージファイルをマウントする
この文書について 色々な理由でXenのイメージファイルをマウントしたくなった時の参考に。勿論、対象のdomUは停止した状態でマウントしましょう。 追加パッケージ kpartxとutil-linuxが必要ですが、きっと入っているでしょう。 確認 Xenのイメージファイルは、デフォルトでは/var/lib/xen/imagesにあります。 fileコマンドで確認すると、以下のようになります。 # file xen.img xen.img: x86 boot sector; partition 1: ID=0x83, active, starthead 1, startsector 63, 208782 sectors; partition 2: ID=0x8e, starthead 0, startsector 208845, 20755980 sectors, code offset 0x4
エンタープライズ：特集：LVMによるディスクパーティションの動的化（前編） (1/7)
特集：LVMによるディスクパーティションの動的化（前編） (1/7) サーバのディスク容量が減少してくると、いずれ訪れるであろう対処策を考えておく必要がある。この特集で解説する「LVM」は、固定されたパーティション概念を無くすファイルシステムの管理方法だ。 Linuxなどのサーバ運営を行っていると、管理者にはさまざまな悩みが出てくる。その中でも深刻なものの1つとして、物理的な問題であるディスク障害がある。現状の環境をそのまま継続利用したいと思っても、容量不足になってしまうと何らかの対処が急務だ。この特集では、新たなディスク管理規格「LVM」（Logical Volume Manager、論理ボリュームマネージャ）について具体的な導入手順を解説していこう。 この特集では、LVMがどのような仕組みを持ち、どのようにすれば既存環境に導入できるかを解説していく。記事上ではRed Hat Linux
FrontPage - 詳解ファイルシステム - livedoor Wiki（ウィキ）
詳解ファイルシステム Linuxのファイルシステムを詳解します トップページページ一覧メンバー編集 FrontPage 最終更新： linuxfs 2009年01月19日(月) 16:03:10履歴 Tweet 詳解ファイルシステム ファイルシステム諸元 subcontentsファイルシステム諸元性能比較パーティション用語集OOMkillerkernelSELinuxgitskillcheckKDBJapanese Linux hackerext3/4最新情報Hans Reiser情報Committerfeature-removal-scheduleTODO中の人OSC2007 Tokyo/FallOSC2008 Tokyo/FallOSC2009 Tokyo/Fall ファイルシステム詳解 filesystem contents注目度の高いファイルシステムvfsext3ext4reise
Filesystem Hierarchy Standard - Wikipedia
Filesystem Hierarchy Standard（ファイルシステム・ハイアラーキー・スタンダード、FHS、ファイルシステム階層標準）は、Linuxを含むUnix系オペレーティングシステム (OS) での主なディレクトリとその内容を定めたものである。大部分において、BSD系のディレクトリ階層を基にして拡張し定式化している。 主要ソフトウェアおよびハードウェアベンダーからなる非営利組織Linux Foundationが保守管理しており、HP、レッドハット、IBM、デルといったベンダーが参加している。 2020年11月)現在の最新版は3.0で、2015年6月3日に発表された[1]。 多くのLinuxディストリビューションはFHS準拠を方針として宣言し、FHSにしたがっている[2][3][4][5]。 もともと、UNIXやUnix系OSには、/etcや/binや/usrなどごく基本的な部
＠IT：ext2／3のフラグメンテーション状態を調べるには
Disk Allocation Viewer（DAV：http://dav.sourceforge.jp/）を使うと、ext2／3ファイルシステムのフラグメンテーション状態を調べることができる。ここでは、DAVをFedora Core 4（FC4）にインストールする手順を紹介する。 DAVをインストールするには、FC4のカーネルソースが必要になる。そこで、まずFC4のカーネルソース（例ではkernel-2.6.12-1.1390_FC4.src.rpm。使用しているカーネルと同じバージョン）をダウンロードして、インストールする。
Geekなぺーじ : Linuxにデフラグが無い理由
「ピアリング戦記」の英訳版EPUBを無料配布します！ 英語のIT系技術書が日本語訳されて海外に届けられることは多く行われていますが、日本語版から英語版への翻訳には高いハードルがあります。 過去に、何度か私が書いた本を英語に翻訳して出版することはできないかを模索したことがありますが、これまで企画が実現することはありませんでした（中国語への翻訳はあります）。 しかし、今回、私としては初となる英訳版を上梓することができました。 2022年に出版した「ピアリング戦記 - 日本のインターネットを繋ぐ技術者たち」ですが、これを日本語だけにしておくのはもったいないという声を内外でいただき、それを受けて英訳を行うプロジェクトが去年動き始めました。 続きを読む... IPv4アドレス移転の売買価格推移および移転組織ランキング100 IPv4アドレスの中央在庫が2011年に枯渇後、IPv4アドレスの移転や、移
デフラグ(Defrag): HDD領域の断片化を解消！ (Defrag - MemoWiki v5)
デフラグ(Defrag): HDD領域の断片化を解消！ -デフラグメンテーション -defragmentation _ ∩ ( ﾟ∀ﾟ)彡 Deflag! Deflag! ( ⊂彡 | | し ⌒Ｊ -Windows では HDD 空き領域が15%以上残っていないとできなかったりする。 -Windows のページングファイル pagefile.sys をデフラグする方法 --一時的に仮想メモリを無効にしてデフラグを行う。 --from DOS/V magazone 2005年8月号 -Contig v1.53 --http://www.microsoft.com/technet/sysinternals/utilities/Contig.mspx -Passion For The Future: デフラグ処理を効率的に行うcontig --http://www.ringolab.c
Linuxファイルシステムのサイズ変更とデフラグ | OSDN Magazine
前回は、Linuxファイルシステムを最適化する方法をいくつか紹介した。今回は、サイズ変更とデフラグという、ファイルシステムに対する2つの操作を取り上げる。 本稿は、先日刊行された英書『Linux Power Tools』からの抜粋である。 ファイルシステムのサイズ変更 Linuxをインストールした後になってパーティションが最適なサイズではなかったと気付くことは多い。たとえば、/usrは大きすぎ、/homeは小さすぎたという場合だ。これまで、この問題を解決するには、シンボリックリンクを利用して、特定パーティションにある一部のディレクトリが別のパーティションにあるように見せかけるか、バックアップしてからパーティションを作り直し、データをリストアしていた。しかし、パーティションサイズの動的変更ツールを利用する方がたいていは簡単だ。幸い、主要なLinuxファイルシステムのほとんどには利用可能なパー
Linuxファイルシステムを最適化する | OSDN Magazine
前回は、一般的なLinuxファイルシステムをいくつか紹介し、それぞれの機能を見ていった。Linuxをすでにインストールしてあれば、パーティションの設定とファイルシステムの構成は済んでいるはずだが、この構成を変更したい場合もあるだろう。最適な方法を探ってみよう。 本稿は、先日刊行された書籍『Linux Power Tools』からの抜粋である。 変更と一口に言っても、中には手間のかかるものもある。たとえば、ファイルシステムを変更するには、バックアップ、新規ファイルシステムの作成、ファイルのリストアという手順が必要になる。ただし、ext2fsからext3fsへの変更だけは例外で、非常に簡単に行うことができる。ファイルシステムを切り替えたら、ファイルシステム作成のさまざまなオプションを利用して、新しいファイルシステムのパフォーマンスを向上させることができる。その他の変更は、比較的簡単だ。ディスク
ext2fs.txt
Remy. Card, Theodore Ts'o and Stephen Tweedie. Design and Implementation of Second Extended Filesystem. In the Proceedings of the First Dutch International Symposium on Linux, Dec 1994. 感想: LinuxのExt2fsの技術的な話。ほとんど FFS と同じだと思う。 Extfs (Linux, 1992) Minix ベースのファイルシステムを拡張したもの。 ファイルサイズ制限を2Gに filename 長の制限を255文字に Ext2fs (Linux, 1994) ベースは BSD の FFS とほとんど同じ。 ブロックグループ シリンダグループの代わりにブロックグループと呼ばれるものから F
all
前置き What's this Document 公開日：2002年7月 (それ以降の情報については書いてない) 主にBSD系のUnix FSsについてまとめて論文を読んで作ったゼミ用資料 論文が主なのでそれほど新しい情報はない Linux系については詳しくない (ブロックアルゴリズムなどについては Linux系の FS の各 variant を調べた方がためになると思う) ウソや間違いやobsolete情報が含まれてると思われるため、 個々の詳しい知識はそれらの情報源をあたること BSD系FSに関する更新事項については Wiki上 で多少扱っている。 しかし特に網羅的に定点観測しようと思ってるわけでもないので悪しからず… きそちしき File System とは… ファイルという単位でデータを管理して、ディスクに貯めておく。 データを管理するためのデータ(メタデータ)もディスクに貯めて
Linuxファイルとファイルシステムのリカバリ | OSDN Magazine
前回は、Linuxファイルシステムのサイズ変更とデフラグについて説明した。この連載の最終回となる今回は、消失したファイルをリカバリする方法を解説する。 本稿は、先日刊行された英書『Linux Power Tools』からの抜粋である。 ファイルシステム破損からのリカバリ コンピュータユーザなら誰もが経験する悪夢、それはファイルシステムが壊れ、データが消失することである。その原因として、システムクラッシュ、ファイルシステム・ドライバのバグ（特に非Linux対応ドライバを使ってLinuxパーティションにアクセスした場合）、低レベルのディスク・ユーティリティの誤用、などが挙げられる。Linuxファイルシステムにはディスクチェック・ツールがあるが、このようなツールには細かい部分に多くの違いがある。 たいていのファイルシステムには、その内容を走査し内部的な整合性をチェックするツールがある。このツール
NTLM 認証プロトコルとセキュリティサポートプロバイダ
概要 このドキュメントは、NTLM認証プロトコルと関連するセキュリティサポートプロバイダの機能について、実装を行なう際のリファレンスとなるように、上級者向けの詳細を記載したものである。 このドキュメントが NTLM に関する網羅的な記載となっていくことを期待しているが、現在のところ筆者の知識不足と記載不足による抜け洩れがあり、いくつかの誤りも含んだものとなっている。 とはいえ、このドキュメントはさらなる調査を進める上での確実な第一歩を提供していると信じている。 ここに記載している情報は、http://jcifs.samba.org で提供しているオープンソースの jCIFS ライブラリにおける NTLM 認証の実装に用いられている。 このドキュメントは筆者による調査と、Samba における実装の解析に基づいて執筆されている。 目次 NTLMとは NTLM の用語 NTLM メッセージヘッダ
壊れたHDDからデータを取出す方法 - ぴょぴょぴょ？ - Linuxとかプログラミングの覚え書き -
停電とか，寿命でHDDが壊れてしまった場合，せめて残っているデータだけでも取出したい・・・そういう泣きそうな状況に陥った人向けの作業メモ． 概要としては，例えばCDROMをCDRへコピーする際には， 一度 CDROMからデータを吸い出してISOイメージをつくって ISOイメージをCDRへ書き込む という作業をする．同じように 壊れたHDDからデータを吸い出して 新しいHDDへ書き込む という作業手順で，破損したHDDから残っているデータが救出できる．以下，具体的な作業手順についてまとめる． 状況を把握する たとえば dmesg で以下のようなエラーが出ている場合は end_request: I/O error, dev 03:42 (hdb), sector 31719462 hdb: read_intr: status=0x59 { DriveReady SeekComplete Dat
削除したファイルをlsofで復元する | OSDN Magazine
たとえば、あなたが午後いっぱいを費やして製作したオーディオ・ファイルの再生を楽しみながら、「やあ、こいつはすごい音だ! こっちに移動しておくとしよう」と思ったとする。そのとき、潜在意識が違和感を唱えるのだ。「ええと、mvだっけ、rmじゃないのか?」…やっちまった。そのショックはよくわかる。誰にでもありうる失敗だ。だが、失われたファイルを取り戻す簡単な方法はある。しかも、それはどの標準Linuxシステムでも使える方法だから、覚えておいて絶対に損はない。 簡単に説明すると、Linuxファイルシステム上にあるように見えるファイルは、実際はinodeへのリンクに過ぎない。inodeには、ファイルのあらゆるプロパティ（アクセス権や所有権など）のほか、ファイルの中味が実際に存在するディスク上のデータブロックのアドレスも記録される。rmコマンドでファイルを削除すると、ファイルのinodeを指すリンクは削
電子書籍.club -
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
使用不能になったハードディスクを復活させる「HDD Regenerator」 - GIGAZINE
物理的にバッドセクタが発生して読み込めなくなったハードディスクをソフトウェアの力で修復し、再度利用可能にするという、にわかには信じられないソフトウェアです。 修復可能なのは、磁性の極性変化による物理的エラー。それ以外の物理的破損によるエラーはさすがに修復できません。しかし、大体6割程度はこの磁性エラーなので、このソフトを使えば60％の確率で復活できるらしい。 前回、ハードディスクの診断を行った結果、全く使い物にならないダメージを受けていることが既に判明しているわけですが、果たして、復活できるのでしょうか？ というわけで、実際に試してみました。 HDD Regenerator http://www.dposoft.net/#b_hddhid 59.95ドルのシェアウェアで、デモ版では実際に最初に見つけた1セクタ分のバッドセクタを修復してくれます。極端な話、1セクタ見つける度に再起動してやり直
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Grid Datafarm - Gfarm file system [Japanese]
Oracle