virtiofsについて - Qiita
この記事は2019年12月時点におけるvirtiofsの簡単な紹介です。 概要 公式サイト: https://virtio-fs.gitlab.io/ virtiofsはホストと(複数の)ゲストVM間でディレクトリを共有するための新しいファイルシステムで、redhatのエンジニアを中心に開発されています。 主なユースケースとしては、まず軽量VM(kata-containerなど)のルートファイルシステムにvirtiofsを使うことが挙げられます。ゲストへの不要なファイルコピーを削減することによりブート時間が短縮される等の利点があります。また他のユースケースとして、ゲストからファイルシステムの詳細が隠蔽されることも挙げられます。ゲストからは共有されているディレクトリのファイルシステムの詳細は見えないので、例えばネットワークファイルシステムのIPやセキュリティ等の設定をゲストで気にする必要がな
Linus Torvalds Calls On Paragon To Send In The New NTFS Driver - Phoronix
Show Your Support: Did you know that you can get Phoronix Premium for under $4 per month? Try it today to view our site ad-free, multi-page articles on a single page, and more while the proceeds allow us to write more Linux hardware reviews. At the very least, please disable your ad-blocker. Linus Torvalds Calls On Paragon To Send In The New NTFS Driver Written by Michael Larabel in Linux Storage
Why not ZFS
ZFS is a hybrid filesystem and volume manager system that is quite popular recently but has some important and unexpected problems. It has many good features, which are probably why it is used: snapshots (with send/receive suppport), checksumming, RAID of some kind (with scrubbing support), deduplication, compression, and encryption. But ZFS also has a lot of downsides. It is not the only way to a
How We Saved Millions in SSD Costs by Upgrading Our Filesystem
How We Saved Millions in SSD Costs by Upgrading Our Filesystem At Heap, we use a multi-petabyte cluster of Postgres instances to support a wide variety of analytical queries for our customers. During COVID we experienced rapid growth in the amount of data we ingest, due to business growth and a global increase in online traffic. This post details some of the problems this caused us and how we solv
結論 マウント時にdelegatedあるいはcachedオプションを付ければ、一貫性を犠牲にして速度を改善できる。 バージョン Docker Desktop for Mac: 2.0.0.3 困ったこと Docker for Macでのvolumeマウントは非常に遅い。 ローカルにあるプロジェクトディレクトリをマウントして開発するような場合、 各種ビルドやライブラリのインストール、下手をするとWebサーバーへのアクセスすら耐えられないほど遅くなってしまう。 解決策 この問題には公式に解決策が示されており、 マウント時に特定のオプションを指定することで、一貫性は犠牲になるものの速度が劇的に改善する。 https://docs.docker.com/docker-for-mac/osxfs-caching/ 詳細な解説は上記ページに譲るとして、概要だけを記しておく。 delegatedは最も信
Western Digital Has Been Developing A New Linux File-System: Zonefs - Phoronix
Western Digital Has Been Developing A New Linux File-System: Zonefs Written by Michael Larabel in Linux Storage on 25 December 2019 at 08:00 AM EST. 26 Comments Western Digital has been contributing a lot more to the Linux kernel in recent years from RISC-V architecture bits to storage enhancements. The most recent code they have been working on in recent weeks is a brand new Linux file-system. Bu
5.11 カーネルで overlayfs に大きな変更があったようで、久々にカーネルの新しい機能を試してみました。 とは言っても、結果だけ言うとすぐに終わってしまうので、すごいことをやったように見せかけるために、復習したりして順に説明していきましょう。時間のない方は最後の方だけ見れば良いです。 OverlayFS とは Union Filesystem の実装の1つで、ディレクトリを重ね合わせて1つのディレクトリツリーを構成できます。Docker なんかではおなじみの機能ですね。おなじみの機能とはいえ、実際に直接マウントして動きを見たことがない方も多いかと思います。そこでまずは動きを簡単に見てみましょう。 重ね合わせるということで、下層側ディレクトリ、上層側ディレクトリを重ね合わせて、マウントポイント以下に見せます。他にワーク用の workdir として指定するディレクトリが必要です。 次
Linux 5.20 To Support Async Buffered Writes For XFS + IO_uring For Big Performance Boost - Phoronix
Show Your Support: Did you know that the hundreds of articles written on Phoronix each month are mostly authored by one individual? Phoronix.com doesn't have a whole news room with unlimited resources and relies upon people reading our content without blocking ads and alternatively by people subscribing to Phoronix Premium for our ad-free service with other extra features. Linux 5.20 To Support As
GitHub - fangfufu/httpdirfs: A filesystem which allows you to mount HTTP directory listings, with a permanent cache. Now with Airsonic / Subsonic support!
A filesystem which allows you to mount HTTP directory listings, with a permanent cache. Now with Airsonic / Subsonic support! License
Google Cloud launches Filestore High Scale, a new storage tier for high-performance computing workloads | TechCrunch
Enterprise Google Cloud launches Filestore High Scale, a new storage tier for high-performance computing workloads Google Cloud today announced the launch of Filestore High Scale, a new storage option — and tier of Google’s existing Filestore service — for workloads that can benefit from access to a distributed high-performance storage option. With Filestore High Scale, which is based on technolog
GitHub - presslabs/z3: Backup your ZFS snapshots to S3.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
Loading...
GitHub - kahing/catfs: Cache AnyThing filesystem written in Rust
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session.
GitHub - containers/composefs: a file system for mounting container images
The composefs project combines several underlying Linux features to provide a very flexible mechanism to support read-only mountable filesystem trees, stacking on top of an underlying "lower" Linux filesystem. The key technologies composefs uses are: overlayfs as the kernel interface EROFS for a mountable metadata tree fs-verity (optional) from the lower filesystem The manner in which these techno
GitHub - LemonOSProject/LemonOS: The Lemon Operating System
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
GitHub - meithecatte/cursedfs: Make a disk image formatted with both ext2 and FAT at once
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
EKSおよびAWS Fargateで実行されているコンテナがAmazon Elastic File Systemを使用できるようになった
Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...
This page was last edited on 3 February 2021, at 04:22. Make btrfs the default file system for desktop variants Summary For laptop and workstation installs of Fedora, we want to provide file system features to users in a transparent fashion. We want to add new features, while reducing the amount of expertise needed to deal with situations like running out of disk space. Btrfs is well adapted to th
Ext4 VM Images - Ext4
Overview Various ext4 users have a particular use-case for system provisioning where they create a FS image, populate it with whatever files they want, and then want to reduce the image to a minimal one to conserve network bandwidth. At deploy time the minimal image is copied to a disk and expanded with resize2fs to fill the whole disk. There are a number of strategies to handle this operation, ea
庄司です。 この記事では、Windows、macOS で sshfs を使用する手順を説明しますが、この説明の前に、sshfs について調べるきっかけになった背景を記述させてください。 私は Docker Desktop の代替として Rancher Desktop を使っています。macOS 上では Rancher Desktop の仮想 Linux 環境に lima が利用されています。 Windows や macOS の場合、仮想 Linux 環境上でコンテナが動作します。 つまり docker-cli を Windows や macOS のホスト側にインストールして、Linux 環境のソケットを通じて Docker デーモンと通信するようにした場合、ホストと Linux 環境でファイルシステムの構成は異なる可能性があります。 具体例を示すと、次のような Docker コマンドを実行
GitHub - unjs/unstorage: 💾 Unstorage provides an async Key-Value storage API with conventional features like multi driver mounting, watching and working with metadata, dozens of built-in drivers and a tiny core.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
ubuntu 20.04 grub symbol 'grub_calloc' not found (備忘録) - Qiita
The GRUB boot loader was previously installed to a disk that is no longer present, or whose unique identifier has changed for some reason. It is important to make sure that the installed GRUB core image stays in sync with GRUB modules and grub.cfg. Please check again to make sure that GRUB is written to the appropriate boot devices. If you're unsure which drive is designated as boot drive by your
Getting Started With the File System Access API | CSS-Tricks
The File System Access API is a web API that allows read and write access to a user’s local files. It unlocks new capabilities to build powerful web applications, such as text editors or IDEs, image editing tools, improved import/export, all in the frontend. Let’s look into how to get started using this API. Reading files with the File System Access API Before diving into the code required to read
Anonymous Coward曰く、 Huawei所属の開発者らが開発したスマートフォン向けファイルシステム「EROFS」がLinuxカーネルに統合される見込みだそうだ（gihyo.jp）。 EROFSは読み取り専用のファイルシステムで、メタデータを小さくすることで高速なランダムリードや記録容量の増加を計っているとのこと。すでにHuaweiのAndroidベースOS「EMUI」で採用されているという。
UPDATE (2021/12/21) After lots of feedback on Reddit (thanks /u/BucketOfSpinningRust!) and doing some more experimenting and digging, I've updated this post with more information -- new/updated sections are marked "Update". tl;dr - Tips for running Postgres on (Open)ZFS-on-Linux (ZoL), which I’m nicknaming “PoZoL”, check out the TOC (or skip to the resource list at the bottom) and browse to whatev
ぜんぜんわからない俺達は雰囲気でbtrfs使っている
雰囲気で ext2/3/4 を使ってきた人が、雰囲気で btrfs を使うためのメモ。 RAID は本稿では深く触れない。 RAID は雰囲気で使えるものではない。 発音 何かと話にあがるどう発音するか問題については、下記が答えで良いと思われる。 It’s called Butter FS or B-tree FS, but all the cool kids say Butter FS — Valerie Henson, “Chunkfs: Fast file system check and repair”, 31 Jan 2008. クールキッズなら バター・エフ・エス [bʌ́tə(r) - éf - es] と発音すれば良い。 "Butter FS" 発音部を抜き出したもの とにかくささっと使うには ファイルを仮想ドライブとして使えばひとまず試用することができる。 128MBの
Stargz Snapshotter: イメージのpullを省略しcontainerdでコンテナを高速に起動する
CloudNative Days Tokyo 2020での、lazypullに関する発表資料です。https://event.cloudnativedays.jp/cndt2020/talks/16 Stargz Snapshotterのリポジトリ： https://github.com/containerd/stargz-snapshotter Read less
Linux 6.3.5 Released With XFS Metadata Corruption Fix - Phoronix
Show Your Support: Did you know that the hundreds of articles written on Phoronix each month are mostly authored by one individual? Phoronix.com doesn't have a whole news room with unlimited resources and relies upon people reading our content without blocking ads and alternatively by people subscribing to Phoronix Premium for our ad-free service with other extra features. Linux 6.3.5 Released Wit
I’ve been using file system for a long time and have always thought of them as tree data structures. A couple of days ago, I had a realization that seems obvious in retrospect, but didn’t occur to me all those years before: The file system tree is different from what I’d usually implement as a tree structure. If you’d ask me to implement a tree data structure, I’d probably write something like thi
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Docker for Macでマウントしたvolumeの遅さに対処する · Lupus
5.11 で追加された OverlayFS の非特権マウント（1） - TenForward
Changes/BtrfsByDefault - Fedora Project Wiki
Windows、macOS で sshfs を使用する | 豆蔵デベロッパーサイト
Huawei開発のスマホ向けファイルシステム「EROFS」、Linuxカーネルに統合へ | スラド Linux
Everything I've seen on optimizing Postgres on ZFS
The Tree Structure of File Systems
bj4menhiao89678.hatenablog.com
sango8.hatenablog.com
kuriharayuichiro.hatenablog.com
j-seiji.blog.jp
www.as-web.jp
yarukimedesu.hatenablog.com