zfsのrefreservationプロパティの挙動を理解する - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? お急ぎの方は「概要」→「意義」→「まとめ」と読めばそれで済みます。 動機 ZFSでデータセットの使用量制御に用いるrefreservationプロパティを調べていたら、自分の直感に反する挙動を示したので整理する。ていうか、ドキュメントをなんとかして欲しい。 前提 OpenZFS (FreeBSD 11.1-RELEASE-p9) 概要 refreservationプロパティは子孫を含まないそのデータセット自身の使用量を予約する。この「データセット自身の使用量」はREFERのことだと思いがちだが、実際にはWRITTENに相当するようである
知っておきたいLinuxファイルシステムの概念 - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? ファイルシステムとは ファイルシステムとは、データとメタデータをある構造に従ってストレージデバイス上に格納したものを指す。 ファイルシステムの作成には mkfs(8) コマンドを使用する。 全体アーキテクチャ 以下の図の通りである。詳細は以下で説明する。 ファイルシステムの構造 ここでは、古典的ファイルシステムであるext2をベースに説明する。 ファイルシステム内で領域を割り当てる基本単位を論理ブロックという。ディスクデバイスの連続する物理ブロックから構成される。論理ブロックサイズ1024,2048,4096バイトのいずれかを選択できる
tempfile再考 - Qiita
何気なく使ってる一時ファイル(tempfile)ですが、このような事があったので少し実装を調べてみました。 テストが高速化されたことで、tmp fileをunixtimeで自前生成していたtest caseが軒並みfailするようになったので、テスト用に生成するファイルはtmpfile(3)使いましょうという知見 — ⁰⁰⁰⁰null (@yuroyoro) September 11, 2014 一時ファイル(tempfile)に期待される挙動 ユニークで推測しにくいファイル名で生成される プロセス終了時に削除される 他のプロセスからは見えない 実際に一時ファイルを作成する際は、これらの要件のうちのいくつかを期待していると思います。 アプリケーションからこのような特性を持つ一時ファイルを生成するためには、通常はなんらかのライブラリを利用するはずです。 というか、普通にunixtimeを元に
エラーを自動訂正するZFSの構成とZFS用パーティション作成時の注意点 - Qiita
この話の続きです。 ZFSの特徴の一つにチェックサムを保管しエラーを検出する機能があります。しかしエラーを検出できたとしても、この例のようにZFSが自動でエラーを修正してくれるためには単純なZFSプールではうまくいきません。壊れたデータを書き直すための正しいデータを持った部分が無いと復旧できないわけで、そのためにプールに冗長構成を持たせる必要があります。冗長構成になっていれば、ZFSはエラーが発生したブロックを破棄し、正常なブロックからデータを自動で復旧してくれます。 ご存知の通り、ストレージシステムに冗長構成を持たせるためにはRAID5, 6やミラー(RAID1)などがありますが、ZFSでの冗長構成のストレージシステムを構成する方法に付いて以下に順に記載します。 RAIDZの作成 ディスクが3台以上ある場合は、RAIDZ (あるいはRAIDZ2、RAIDZ3)を構成するのが適正でしょう。
APFSで再燃したNFD問題 - Qiita
iOS 10.3 でAPFSが本番投入されました。それでiPhoneやiPadが文鎮化するなどの深刻な問題はみられなかったものの、やはり無問題とはいかなかったようで。 iOS10.3で不具合の出るアプリは、APFS関連の影響かも（Unicode Normalizationの振る舞いが変わったらしい）。GoodReaderとDropboxの同期でエラーが出るようになったのだが、ファイル名に濁点を含むファイルを除いたら同期できるように。 — 山路達也 (@Tats_y) March 29, 2017 原因を調べてみました。 #!/usr/bin/env perl use strict; use warnings; use feature ':all'; use Encode; use Unicode::Normalize; use utf8; binmode STDOUT, ':utf8';
ZFSのRAIDZの修復とついでに拡張する - Qiita
ZFSのプールを使っていると、作ったあとにHDDが壊れたり、容量を増加したくなることがあります。その時に、慌てないように事前に調査と演習をしたのでその備忘録的なものをまとめてみました。 容量の拡張は、ZFSでミラー(RAID0)にやったことがあるのですが、RAIDZは初めてです。 普通のRAIDでだと別のRAIDセットを作りコピーするとかが必要になります。 ZFSだと、無停止で拡張できるのではないかと思いブートボリュームでできないかやってみました。 実行環境はXenServer上でFreeBSD 10.3でやってみました。 #準備 FreeBSD 10.3を用意する。 Boot Volume用として8Gバイトのストレージを3個用意する FreeBSD 10.3のインストラーで自動でRAIDZでZFSを作る ブートボリュームzrootが/dev/ada[012]で出来ているはずです。 /de
zfs - MacBook Air (13-inch, Late 2010) をオクタブート化 - Qiita
勇者がいないなら、自分が勇者になればいいのに。 前回記事 勇者はぜひ上記に macOS と illumos も加えたクアッドブートディスクをこさえてみてください。 というわけでやりました。 illumos は後述の理由でないけどクワッドどころかオクタブートです。それもベアメタルで。 MacBook Air (13-inch, Late 2010)。6年以上前のノートブックの未来、かつて私のメインノートで、その後長女のメインノート。だから裏蓋はこんな。 その長女のメインノートも、私と同じ MacBook Pro (Retina, 13-inch, Mid 2014) に変わって以来、しばらくお蔵入りしていたのを引っ張り出して来ました。 USB3はおろか、Thunderboltもない、CPUパワーは今日日のiPhoneに負けてしまうロートルですが、 Sierra も Windows 10 も動
Windows Subsystem for Linuxのファイルシステムにおける注意点 - Qiita
Disclaimer ビルド14393.10時点の情報を書いている。後のアップデートで変更される場合がある。 より正確・詳細な説明は参考資料を見てほしい。 はじめに Windows 10 Ver. 1607で搭載されたWindows Subsystem for Linux（WSL）は、まだbeta版であるためかファイルシステム周りで歯がゆい点があるので書いておく。 便宜的にWSLのプロセスをWSL側、通常のWindowsのプロセスや環境をWindows側という風に表現する。 TL;DR WSL側では常にパスがcase-sensitive Windows側から%LocalAppData%\lxss以下をいじるとハマる Windows側で追加したファイルはWSL側から見えない WSL側でディレクトリエントリがキャッシュされるため、Windows側からの変更が正確に見えないかも /mnt/c/以
ZFS on Linuxで高信頼なストレージを作る（Ubuntu 14.04） - Qiita
ZFSとは何か？ 非常に多くのメモリやCPUを消費してしまうが、それでも利用したいと思うメリットが沢山。 ZFSのメリット 128bitファイルシステムであるので現行の64bitファイルシステムよりはるかに大きな容量のデータを扱うことが可能。最大16EiBのファイルサイズ、最大256ZiBのファイルシステム。 ストレージプールの採用。複数のHDD の容量をまとめて大きなプールとして扱い、その中から必要な容量を切り出して利用する。 コピーオンライト。ファイルへの書き込み時にデータを上書きしない仕組み。書き込み中に電源断が発生したとしても、元のファイルが保たれるのでエラーの発生が防げる。 64bitチェックサム（スクラブ）。一部の領域だけでなくファイルシステム全体に対してEnd-to-Endのチェックサムを行う仕組み。データの構造に関する誤りを訂正できる。 RAID5/6の書き込みホール問題の
Node.jsでファイルをコピーする - Qiita
function _copySingle(src, dest, callback) { var aborted = false; var r = fs.createReadStream(src), w = fs.createWriteStream(dest); r.on("error", function (err) { done(err); }); w.on("error", function (err) { done(err); }); w.on("close", function (ex) { done(); }); r.pipe(w); function done(err) { if (aborted) { return; } callback(err); aborted = true; } } var argx = require('argx'), async = require
Mac OS X の NFD 問題での対策諸々 - Qiita
おさらい。 ∥ Unicode正規化 - Wikipedia 正規化形式 NFC: Normalization Form Canonical Compression | 文字に何がくっついていようと、組み合わせて作られた文字であろうと、「一文字」は「一文字」じゃ。圧縮形式。Linux のファイルシステムや Windows の NTFS などが普通に使っている。 NFD: Normalization Form Canonical Decompression | 濁点・半濁点を、あるいはウムラウト等のダイアクリティカルマークを、本体の文字とは分離してエンコードした形式。OS X の HFS+ が、これを採用してくれちゃっている。 基本としては、OS X 上に置かれるファイルは NFD であってくれて、Linux や Windows 上にあるファイルは NFC であってくれると平和で助かる。 追
zfsに対応したDocker - Qiita
Dockerが、従来のaufsドライバーに加え、zfsに対応したそう。 先ほどマージされました。 zfs-utils based zfs graph driver #9411 https://github.com/docker/docker/pull/9411 Merge pull request #9411 from Mic92/features/zfs-rebased https://github.com/docker/docker/commit/e7568ed227908c3470b6a341ed24c05ca486368d かれこれ半年ほどをかけ、@Mic92氏を中心に実装されたようです。 @Mic92氏はpython-mpd2の作者でもあります。使ったことはありませんが。 Dockerのコアコミッタも喜んでいるようです。 boom baby pic.twitter.com/qcO
Failed to mount folders in Linux guest. This is usually because the "vboxsf" file system is not available.を直す方法 - Qiita
$ vagrant vbguest $ vagrant plugin install vagrant-vbguest $ vagrant vbguest GuestAdditions versions on your host (4.3.20) and guest (4.3.14) do not match. The guest's platform is currently not supported, will try generic Linux method... Copy iso file /Applications/VirtualBox.app/Contents/MacOS/VBoxGuestAdditions.iso into the box /tmp/VBoxGuestAdditions.iso mount: /dev/loop2 is write-protected, mo
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
LXD with ZFS でバックアップをしたい - Qiita
UltraZed 向け Debian GNU/Linux の構築(Debian9 Root File System編) - Qiita
zfs - 単一パーティションでマルチブート - Qiita
zfs - 持ってけ ubuntu 16.04 仮想マシン - Qiita
FreeNASのzfs環境でHDD交換したメモ - Qiita
ZFS Install on CentOS - Qiita
Ubuntu, ZFS, docker で作る家庭内サーバ - Qiita
