`cp`はディスク上ではデータをコピーしないことがある

誰もが使うLinuxのコマンドの一つにcpがあります。cp <src> <dest>のように引数を与えると<src>というファイルを<dest>にコピーします。この処理は以下の図のように(1)<dest>のinode(ファイルサイズ、作成時刻といったメタデータを保存するデータ)を作成し、(2)<src>のデータであるデータAをディスク上の別領域にデータBとしてコピーしてから、(3)<dest>からデータBを参照するようにする………とは限りません。 本記事では、この「とは限らない」ケースについて説明します。次節以降では前提知識としてファイルシステムのreflinkという機能を紹介して、その後に、reflinkを使用するcpの挙動について説明します。 データブロックを複数ファイルから参照するreflink機能 直感的にはファイルが別であればデータは前節で述べたように別の領域を指しています。しか

[mas-higa]

それ cp コマンドじゃなくて、ファイルシステムの仕様じゃないの…と思って読み始めたら、そう書いてあった。

[hevohevo]

知らなかった。reflinkは明示的に使う機能だと思っていたので、デフォで有効になっていることが驚きです。これほど影響範囲の広いパッケージで、デフォ挙動の変更を行うにあたってどのような議論があったのでしょうか

[suka6411144]

macにもCoWのコピーがあるけど、あっちは-cオプションを渡さないと有効にならないんだよな

[heguro]

デフォルトでreflink出来ればするようになってたのは知らなかった

[toaruR]

これ、ファイルシステムによっては、仮想機のスナップショットでバックアップ取ったときひょっとする？！

[agricola]

ハードリンクと違ってコピー元・先どっちを書き換えてもその瞬間から2バージョンになる素敵機能。btrfsで初めて使ったときは感動した。

[jacoby]

sync;sync;sync;とオマジナイ唱えてshutdownみたい

[strawberryhunter]

ext4がそうじゃないっぽいことの方が意外だった。

[dot]

ファイルシステムのことやろなと読み始めたらやっぱりか。

[kanikanidokokani]

早いし不整合も起きないしフラグで選択できるしよく出来た仕組みだな～（こなみ

[hatest]

同一ドライブでコピーしてる時点で、障害体制もクソもないから参照で済ます方が賢いだろ

[rail44]

AIで並列に開発する時に、git管理外のファイルも難しいことせずに単にworktreeへCoWで持ち込めばいいよねってのに繋がる

[gogatsu26]

“cpはreflinkを使えたら使うというモードになっています。つまり、XFSやBtrfsでcp <src> <dest>を実行すると<src>と<dest>はコマンド実行直後はファイルコンテンツをディスク上で全て共有するようになり”

[daishi_n]

コピーオンライトとか対応してるファイルシステムならコピーしないで書き込み時にコピーするよね

[kobito19]

"reflnkが使えたら使う" っていうcpの仕様(デフォルト挙動の選択)やろがい

[Shinwiki]

しゃろう？

[sucelie]

zfsあたりの話じゃないの？って思ったら似たような話だった

[yarumato]

“別ファイルで同じデータを共有できるreflink使えるファイルシステムはLinuxではXFS,Btrfs。GNU cp（2021以降）はreflinkを使えたら使う。ext4なら遅いがXFSなら一瞬。同ディスク内のコピーがバックアップにならない問題も”

[Nyoho]

btrfsを勉強したときにbtrfsなどが使っていることを知りました。本当に違いが出たら書き込む。素晴らしいですね。たぶんスナップショットが一瞬なのもそれだったような(?)

[keidge]

これはファイルシステム上の話だが、そもそもファイルシステムより低いレイヤの物理ストレージでも似たような状況になっている。スナップショット機能を実現するためであったり、いろんな要因がある。

[rawwell]

"never: 必ずデータコピーする。 " えっなにそれこわい。業務でxfs 使うが知らなかった…

[circled]

ZFS勢には2005年くらいから既知だし、APFS(2017年)からも普通に使われている（WWDCでも高速ファイルコピーのデモがあった）。Arch Linuxユーザーはbtrfs利用が多いのでLinux勢にも既知かと思ってたよ

[dollarss]

えっ？！sync;sync;sync;reboot ってしないとだめなのか？

[punychan]

物理故障（ビット化けなど）への耐性のために同じFS内でcpするなんてありえないので、CoW大歓迎よ。

[UhoNiceGuy]

copy on writeとのこと。ファイル全体でなく、部分的にも管理してくれるのね//バックアップ用途なら別ストレージ使えば、この機能は使われないよね

[sgo2]

https://www.tohoho-web.com/linux/cmd/cp.html#special-features --reflinkオプションの解説を読めば分かるけどreflinkはCopy on Write(変更される時点でコピーが作成される)なので当然と言えば当然の挙動

[nguyen-oi]

裏でCoWが勝手に走ってたの、言われなきゃ一瞬でコピー完了して速いな〜で済ませてた

[kyahi227]

どうせfs依存だろと思った