タグ

ServerAdminとFileSystemに関するlliのブックマーク (10)

  • http://wiki.lustre.org/manual/LustreManual20_HTML/index.html

    lli
    lli 2010/05/25
    lustre 2.0 operations manual
  • lustre / Network Clustering FS.

    This site, wiki.lustre.org, is the main community repository for Lustre information. Consult the sidebar for links to major Lustre topics. Learn more about Lustre at http://www.lustre.org. Lustre Software Releases Downloads Lustre Lustre-aware e2fsprogs Current LTS Maintenance Release Lustre 2.15.7 Released June 10, 2025 Changelog Current Major Release Lustre 2.16.1 Released Nov 15, 2024 Changelog

    lli
    lli 2010/05/25
    Lustre main page
  • IBM Developer

    IBM Developer is your one-stop location for getting hands-on training and learning in-demand skills on relevant technologies such as generative AI, data science, AI, and open source.

    IBM Developer
    lli
    lli 2010/05/20
    切断時の動作がCodaと違うらしい。
  • MOONGIFT: � 成熟した分散化ファイルシステム「OpenAFS」:オープンソースを毎日紹介

    企業内のファイルサーバというと、SambaやWindowsを使った中央集約的なファイルサーバがメインになっている。だが、扱うファイルの量が膨大になってきていること、その維持管理がわずかなサーバによって管理されている問題がある。 そうした状況を受け、ファイルシステムも次世代化を目指す段階にきたようだ。 今回紹介するオープンソース・ソフトウェアはOpenAFS、分散化ファイルシステムだ。 OpenAFSの開発は実に1983年からはじまっているらしい。当時ではまだまだ速すぎたかも知れないが、現状のネットワーク化がようやくOpenAFSを求めつつある。分散化することによって複数のファイルサーバを意識することなく利用できるのは素晴らしい。 Mac OSX向けインストーラー インストーラー付きのクライアントはWindowsMac OSX向けが用意されている。クライアントはインストールするだけで良いの

    MOONGIFT: � 成熟した分散化ファイルシステム「OpenAFS」:オープンソースを毎日紹介
  • データストレージEXPOで、スケールアウト型ストレージに注目してみた

    ストレージの技術トレンドの1つとして「スケールアウト型ストレージ」に注目しています。ちょうど先週、東京ビッグサイトで「データストレージEXPO」が開催されたので、そこで展示されていたスケールアウト型ストレージをいくつか紹介しましょう。 スケールアウト型ストレージとは? そもそもスケールアウト型ストレージとは、ストレージを継ぎ足していくことによって柔軟に容量を増やしていけるストレージのことです。 一般にこれまでのストレージは、例えば1台の容量が100GBのストレージを利用していて容量が不足になった場合、もう1台のストレージを新たに追加したとしてもあくまでもそれは100GBのストレージが2台あるということです。1台で200GBのストレージと比べると、データを保存する際にどちらのストレージに保存するかのルール決めが必要だったり、バックアップの手間が2倍になり、またストレージをぎりぎりまで使い切る

    データストレージEXPOで、スケールアウト型ストレージに注目してみた
  • ディレクトリの中にある大量の小さなファイルを高速に読み込む方法 - 射撃しつつ前転 改

    ディレクトリの中にある大量のファイルを高速に読み込む方法が知りたかったので、実験してみた。想定しているシチュエーションは、一つ一つのファイルは数KB程度だが数が多い、という場合である。適当な順番でアクセスすると、ランダムアクセスになってしまいとても時間がかかる。個々のファイルを読み込む順番はどうでも良く、すべてのファイルを処理することさえできればいいので、原理的にはシーケンシャルアクセスで処理できてしかるべきである。 まず、ファイルシステムについて。HDDやSSDなどのハードウェアにアクセスする際には、ファイル名などという概念はもちろん存在しない。ファイル名と実際のディスク上の対応を管理するのがファイルシステムの主な役割である。ファイルシステムは、ファイル名からそのファイルに対応するブロック番号(メモリアドレスみたいなもんだな)を調べて、そのブロック番号を指定してHDDやSSDにアクセスす

    ディレクトリの中にある大量の小さなファイルを高速に読み込む方法 - 射撃しつつ前転 改
  • ハードディスクにおける容量の概念をひっくり返すDrobo

    ここ1ヶ月の大きな悩みが増え続けるデータと、それを保存するハードディスクの問題です。 しかも、PCに保存しているデータというのは、それをロストした際の影響範囲でいうと、もはやおれ個人の問題ではなくなっているわけです。 リンク: もう外付けハードディスクはRAIDじゃないと心配でねむれないのでRAID-USB-2TB. そうなると、個人のデータでも冗長性とか、バックアップとか、 そのバックアップも物理的に複数のメディアや場所に置くなんていうことをちゃんと考えておかないといけない時代になってきていますね。 ということで、先日のエントリーでは、より大きなサイズのRAID対応のハードディスクを買うことにほぼ決めていたのですが! ここにDroboという黒船の来襲です。 そうです、私が求めていたのはただディスク容量が大きいというような問題じゃなくて、このDroboのように、ディスク容量そのものの概念を

  • Ext4 - Linux Kernel Newbies

    WARNING: This page is not up to date, check the official wiki and other documentation Ext4 is part of the Linux 2.6.28 kernel, read the previous link to know more details about that release. 1. Introduction Ext4 is the evolution of the most used Linux filesystem, Ext3. In many ways, Ext4 is a deeper improvement over Ext3 than Ext3 was over Ext2. Ext3 was mostly about adding journaling to Ext2, but

  • Netatalk SRPMs for Fedora/Scientific Linux/CentOS:HAT blog

    雑談。

    lli
    lli 2008/12/24
    コメントでのやりとりも参考
  • Mac で ZFS(iSCSI) を使ってみた。 - Twisted Mind

    前回はフォーマットしていたので、せっかくなので ZFS でマウントさせてみました。 んー勘違いしている気がしてきた、これ単にブロックデバイスを zpool に追加してるだけで、 ZFS をそのまま使っているワケじゃないですね、あほだな自分。 目的 Solaris の ZFS を iSCSI を有効にして Mac から認識させてそのまま Mac で ZFS ファイルシステムとして使う。 準備 VMware Fusion に OpenSolaris nevada (最新版) HD を多めに追加(無駄に RAID-Z1 を組んでます) VMware で HD を追加する posted by (C)voluntas Mac で ZFS を使えるように設定しておく この3点だけで出来ました。 Solaris 側 bash-3.2# iostat -En c1t0d0 Soft Errors: 0 H

  • 1