Linuxのブロックデバイスレベルで実現するrsyncより高速な差分バックアップについて - ゆううきブログ
社内で論文輪読会みたいなことやってて、そこで紹介した論文の内容についてです。 最近、Graphite に保存しているデータのバックアップ（データ同期）に rsync 使ってて、かなり遅いので困ってた。 LISA っていう 大規模システム、sysadmin 系のカンファレンスがあって、ここから論文探してたら、ちょうど巨大データの高速バックアップの実装の話があったので読んでみた。 論文概要 dsync: Efficient Block-wise Synchronization of Multi-Gigabyte Binary Data - https://www.usenix.org/conference/lisa13/technical-sessions/presentation/knauth - Thomas Knauth and Christof Fetzer, Technische U
Linus Torvalds氏が語る「Linuxはどこへ行くのか」
2013年5月29日から31日までの3日間、国際技術カンファレンス「LinuxCon Japan 2013／CloudOpen Japan」が東京で開催された。Linuxカーネルの開発を支援しているThe Linux Foundationが主催する技術カンファレンスだ。 Linusが語ったカーネル開発の現状 今回のLinuxConでは2年ぶりにLinus Torvalds氏が来日。「Linux: Where Are We Going」と題して、Linus氏と、IntelのDirk Hohndel氏（Intel's Chief Linux and Open Source Technologist）によるトークセッションが行われた。 最初に「普段はどんな風に自己紹介していますか」と振られたLinus氏は「Linusです、としか言わないよ。それだけ。普段は、なるべく注目を集めないようにしてるから
WalB v1.0 リリース - Cybozu Inside Out | サイボウズエンジニアのブログ
更新情報 2017年6月現在、WalB のプロジェクトページはhttps://walb-linux.github.io/です。 こんにちは．サイボウズ・ラボの星野です． 今日は，効率的なバックアップと非同期レプリケーションを目的とした Linux カーネルドライバ WalB についての簡単な紹介と，そのバージョン 1.0 のリリース告知をさせて頂きます． WalB って何？ WalB は「ワルビー」と発音します．名前の由来は Block-level WAL です．WAL は Write-Ahead Logging (ログ先行書き込み) のことで，データベースの一貫性制御等に用いられます． WalB を使うと，オンライン状態のブロックデバイスにおいて，アプリケーションやファイルシステムによるデータ書き込みによって生じる差分データを，ブロックデバイスをフルスキャンすることなく効率的に取得出来る
WalB こぼれ話: プロトタイプの性能問題解決 - Cybozu Inside Out | サイボウズエンジニアのブログ
「サイボウズ・アドベントカレンダー2012」も、今日を入れて残り３日となりました（これまでの記事一覧）。 はじめに こんにちは，サイボウズ・ラボの星野です． 私は先日開催されました WebDB Forum 2012 にて，ブロックデバイス(ストレージ) のバックアップとレプリケーションを効率化する Linux カーネルデバイスドライバ「WalB」についての発表を行いました． 発表内容につきましては，資料を SlideShare にて公開しておりますので，こちら をご覧下さい． 発表の中で私は，WalB プロトタイプの性能評価を行った結果，オーバーヘッドが小さいことを示すグラフを提示しました．ただし，最初からこのような性能が出たわけではありません．初めてプロトタイプを動かして性能データのグラフを見たときは，「最初からうまくいくわけないよね」と思いながらも期待と現実の差にがっかりしました． 本
Linux KernelのLinked Listの実装が面白い件 - 愛と勇気と缶ビール
最近、Robert Love先生の本を暇な時にダラーと読んでいたりするわけですが、それの中にLinux Kernel内部で使われているLinked Listの実装が書いてあって面白かったので共有。 まず、Linked Listの一個一個のエントリを表すstructを定義します。 struct list_head { struct list_head *next, *prev; }; いやいやいやいや。いかにC力の低い僕でも流石にこれはあきません。騙されませんよ。前後のエントリへのポインタは確かにあるけれども、これにはデータを指すためのポインタがないじゃないの。おじいちゃんまたデータ忘れてきちゃったの？いやあねえ。 おじいちゃんは言った。「それはお前の短見というものじゃ。このLinked Listは以下のコードのようにデータ構造に埋め込んで使うものなんじゃよ。」そしてそれは正しかった。 st
Linux I/O path_20070116
1. The as_add_request function handles adding a new request to the Anticipatory scheduler. It obtains an io_context, updates request histories, adds the request to rb trees and lists, and updates the scheduler state. 2. When updating request histories, it calculates think time between requests and seek distance, and stores these in the io_context to model I/O behavior. 3. The scheduler state is al
Kernel index [LWN.net]
This index covers articles published in the LWN.net Kernel Page. All articles from the beginning of 2004 have been entered here. Academic systems Realtime Linux: academia v. reality (July 26, 2010) Popcorn Linux pops up on linux-kernel (May 5, 2020) Access control lists Rich access control lists (October 20, 2015) ACCESS_ONCE() ACCESS_ONCE() (August 1, 2012) ACCESS_ONCE() and compiler bugs (Decemb
LWN.net - Linux Weekly News
LWN.net is a reader-supported news site dedicated to producing the best coverage from within the Linux and free software development communities. See the LWN FAQ for more information, and please consider subscribing to gain full access and support our activities. [Development] Posted Aug 16, 2024 15:52 UTC (Fri) by daroc Python has had formatted string literals (f-strings), a syntactic shorthand f
Linuxsmiths - Master with Our Expert Tutorials and Tips
Linux Mkisofs CommandThe Linux mkisofs command is a versatile tool for creating ISO 9660 filesystem images, which are commonly used for distributing software and bootable media. Understanding how to use mkisofs effectively… Linux Mkfile CommandThe Linux mkfile command is a specialized utility designed for creating files with predetermined sizes, which is particularly useful for testing and perform
heise online – IT news, guides and background information | heise online
30 years ago today, the home computer era came to an end with the bankruptcy of Commodore. For fans of the cult computers C64 and Amiga, it is a day of mourning In an interview, the Logitech boss dreamed of a subscription mouse. The company emphasizes that such a product is not planned. A ransomware attack on a milking robot in Switzerland ends tragically for a cow and her calf.
Basic Linux Internals
The document provides an introduction to Linux and device drivers. It discusses Linux directory structure, kernel components, kernel modules, character drivers, and registering drivers. Key topics include dynamically loading modules, major and minor numbers, private data, and communicating with hardware via I/O ports and memory mapping.Read less
Linuxカーネルの開発環境 - ウォンツテック
Linuxのソースはtarballを拾ってくれば簡単に読めるのに肝心のカーネルをいじろうと思うと開発環境構築の日本語ドキュメントも少なくちょっと大変ですよね？ という事でqemuを使った簡単Linuxカーネル開発環境の構築手法を載せておきます。（僕の開発PCはこれの実験最中にMBR書き換えで起動出来なくなってますので十分注意してください... grubを弄らなければたぶん大丈夫ですが） ちなみにこの作業はLinuxの開発環境構築に止まらず、気合の入った人なら完全オリジナルディストリビューション構築の手がかりになるはずです。 事前に用意するのは以下になります。 ※括弧内は僕の環境です Linux環境 (2.6.18) gcc (確か3.4.x) Linux 2.6.18のソース Linux 2.4のソース *1 qemu (0.8.2) qemu-0.9.0-windowsなどに付属している
LinuxCon2010/The Stable Linux Kernel Tree, Delivering a Stable Platform on a Constantly Moving Base - mnishikawaのブログ
The Stable Linux Kernel Tree, Delivering a Stable Platform on a Constantly Moving Base Greg Kroah-Hartman, Fellow at Novell 最近の安定版Linuxリリースについて Linuxは最も進化の速いソフトウェアプロジェクトで、安定することはない。 Linuxの目標は安定させることだが、継続的に修正してリリースするしかない。 最近のカーネルの規模を示す数値 33315files 1200万ステップ 2478 developers 342 companies 変更量を示す数値 116000lines added 50000lines removes 2300lines modified per day for all 2009 5.51change/hour ! Linuxの歴史
Linuxサーバ運用マニュアル
Linuxサーバ運用マニュアル 第6話「リソースをチェックしよう！」 サーバ運用について，リソースのチェックは重要です。マシンそのものがトラブルをかかえていては，どんな優秀なアプリケーションも役にははたちません。また，運用していく上でマシンのスペックが不足しているなら，対応する必要がありますし，普段からチェックしていれば，マシンの異常を早期発見することもできます。 ここでは，サーバマシンの何をチェックするべきなのか，また，それにはどのようなコマンドを用いるのかを紹介していきます。 CPUのチェック CPUはコンピューターの心臓部であり，性能に関係するため，重要なチェック対象です。CPUそのものと，プロセスの状態についてチェックします。チェックしたいのは次の項目です。 CPU使用率 CPUがどれだけ使われているかを%で表わしたものです。IDLE（待機）の値をチェックします。 IDLE（待機）
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.makelinux.com/resources
Block Drivers
Kernel Programming
mcpacino/dm-snap-mv @ GitHub
ju11net九州体育(科技)有限公司
IBM Developer
