ローカルポートを食いつぶしていた話 - download_takeshi’s diary
ここのところ、お仕事で管理しているシステムで、夜中に負荷が急上昇する事象が発生しており、夜な夜な対応に追われていました。 （このブログ書いている今も、負荷がじわじわ上昇中なんですが・・・） で、いろいろと調査した結果、ようやく糸口がわかってきました。 結論から言うと、ローカルポートなどのネットワーク資源を食いつぶしていたようです。 以下、調べていってわかったことなどのメモです。 トラブルの事象 運用しているのは Apache2.2 + mod_perl2 なwebサーバで、リスティング広告システムの配信系です。 リスティング広告の配信のシステムって一般的にロジックが複雑でいやーな感じなんですが、このシステムもご他聞に漏れずかなりのひねくれ者で、しかもトラヒックは結構多めです。システム全体で、日に1000万〜2000万クエリくらいかな。幸か不幸か、このご時勢においてもトラヒック的には成長し続
What parts of Linux kernel can I read for fun?
2024 Developer survey is here and we would like to hear from you!
30日でできない 自作Linuxクローン開発 - るくすの日記 ~ Out_Of_Range ~
この記事は 自作OS Advent Calendar 2014 - Adventar 12/25の記事です。 一ヶ月程前からLinuxカーネルのコードを読み始めたので、解読ついでに自分でもカーネルを作ってみました。 とはいっても、まだ半分も完成してないです（） 当初は、30日でできる 自作Linuxクローン開発 を予定していたのですが、 予想以上の規模で、解読とフルスクラッチ開発を併行するのは結構大変でした... という訳で、現在実装できている所まで紹介します。 開発レポジトリはこちらです。 RKX1209/Abyon · GitHub (インストール方法や実行方法はここに書いてます) 実装した機能 プロセススケジューラー Runキュー ハードウェア割り込み(PIC 8259A) 遅延割り込み Tasklet グローバルタイマー(PIT) タイマーリスト 仮想ページング(IA-32 MMU
Linux Kernel Hack入門編 - φ(・・*)ゞ ｳｰﾝ カーネルとか弄ったりのメモ
この記事はLinux Advent Calendar 2014の25日目ですヽ(=´▽`=)ﾉ 今回はLinux Kernel Hack入門編ということで入門的なことを書いてみたいと思います。 まず使用する環境ですけど最近出たばっかのFedora 21のWorkstationにしました。まあ、今回の内容的にはディストリビューションは問わないんですが、多くの人が馴染んでいるであろうfedora系というかパッケージマネージャがyumということでこれにしてみました。 自分は普段Arch Linuxなんですけど、こっちだとkernelのmake install時にちょっとしたスクリプトを書く必要があったりするのもあって、fedoraのほうが手軽かなというのもあります。 カーネルコード・リーディング ブラウザベースでコード・リーディング 読めるソースは大概メインラインのカーネルということになりますが
Linuxでロードバランサやキャッシュサーバをマルチコアスケールさせるためのカーネルチューニング - ゆううきブログ
本記事の公開後の2016年7月にはてなにおけるチューニング事例を紹介した。 はてなにおけるLinuxネットワークスタックパフォーマンス改善 / Linux network performance improvement at hatena - Speaker Deck HAProxy や nginx などのソフトウェアロードバランサやリバースプロキシ、memcached などの KVS のような高パケットレートになりやすいネットワークアプリケーションにおいて、単一の CPU コアに負荷が偏り、マルチコアスケールしないことがあります。 今回は、このようなネットワークアプリケーションにおいて CPU 負荷がマルチコアスケールしない理由と、マルチコアスケールさせるための Linux カーネルのネットワークスタックのチューニング手法として RFS (Receive Flow Steering) を
http://kernel.org/doc/Documentation/kernel-parameters.txt
Kernel Parameters ~~~~~~~~~~~~~~~~~ The following is a consolidated list of the kernel parameters as implemented (mostly) by the __setup() macro and sorted into English Dictionary order (defined as ignoring all punctuation and sorting digits before letters in a case insensitive manner), and with descriptions where known. Module parameters for loadable modules are specified only as the parameter na
シェルから直接Windowsアプリケーションを起動できる「binfmt_misc」 - 試験運用中なLinux備忘録・旧記事
Linuxカーネルに古くからある機能に「binfmt_misc」というものがあり、Linuxネイティブの「ELF」以外の形式であっても、処理をアプリケーションに渡すことで、実行ファイルをシェルから普通に実行するのと同じ感覚で起動(処理)でき、この機能を利用することで、WineでWindowsアプリケーションを実行するのが楽になる。 現在、Wineでsetup.exeなどのインストーラを実行してインストールされたものに関しては、デスクトップ環境のメニューの中に、「スタート」メニュー項目が出てくるようになっているため、それに関してはメニューからの起動でよいのだが、 setup.exeなどのインストーラ自体の起動 CLI(コマンドライン・インターフェース)アプリケーションの実行 zipファイルなどを展開して配置する形でインストールされたアプリケーションの起動*1 といったものに対しては役に立つ。
vmstatはcpu waをどうやって算出しているのか
はじめに vmstatには'cpu wa'フィールドがあります． このフィールドの値はどっからでてきているのでしょうか． それをソースコードの面で探求したストーリー． 出張カーネル読書会の前座として発表させていただきました． 資料 発表に利用したプレゼンテーション資料のPDF版(540k)． Linux kernel 2.6.11 のソースコードとDebian sidのprocpsに入っているvmstatのソースコード をgonzui 0.9を利用して解析してみたときの記録です． 発表トランスクリプト 西尾さんからのいただきものです．ありがとうございます． わたしは、上川と申します。Debianのデベロッパーやってます。今日は前座と して、思いつきでvmstatでお話します。vmstatでいろんな項目出てきますけど、 これってどういう意味だろうというのを調べてみようと思って、力尽きてioの
Microsoft Word - HTP-j.doc
Linux カーネル開発への参加方法 カーネル開発プロセスへの手引き Jonathan Corbet、corbet@lwn.net 本書は、開発者（およびその上司）が開発コミュニティと一緒に作業する際のフラストレーションを最小限にすることを目 的としています。ここでは、Linux カーネル（または一般のフリーソフトウェア）の開発に特に深い知識を持たない人でも 理解できる形で、このコミュニティの仕組みを文書化しようとしています。一部には技術的な内容もありますが、本書の多 くはプロセス志向の議論であり、その内容を理解する上でカーネルのプログラミングに関する深い知識は不要です。 1 1. カーネル開発プロセスへの手引き 本書は、開発者（およびその上司）が開発コミュニティと一緒に 作業する際のフラストレーションを最小限にすることを目的とし ています。ここでは、Linux カーネル（または一般のフリ
Linux/メモリ確保とVSZとRSS - discypus
(2003-12-14 新規作成) Linuxでメモリ確保したときのVSZ,RSSとfreeの値の変化。 RedHat 7.2 (kernel 2.4.7-10) + apt(freshmeat.net)使用。 [編集]課題 # VSZとRSSの合計を表示すると、 $ ps -eo vsz,rss | awk '{v+=$1;r+=$2}END{print v,r}' 53212 25264 freeより少ないのだが、なにがメモリ(50MB以上)を使っているのか？ プロセスがスワップされるとps uxのSTAT欄がSWになるはず。 このとき、VSZ,RSSの値は0になった‥‥と思うが、本当にそうか？ （Linux-users-MLで話題になったと思う） LibraryとSystemCallの確認 (timestampつき) $ ltrace -r -o ltrace.log ./vsz $
Redhat Man BUG: soft lockup - CPU#1 stuck for 10s! [pns:24386]
この対策が正しいかどうかはわからんが、とりあえずやりました。 /var/log/message に BUG: soft lockup - CPU#1 stuck for 10s! [pns:24386] というエラー発生後、サーバがフリーズ。 下記、URLを確認して手順通りに対応しました。 https://access.redhat.com/knowledge/articles/17187 1. # sysctl -w kernel.softlockup_thresh=30 2. # vi /etc/sysctl.conf 次の行を追記 kernel.softlockup_thresh=30 3. # reboot 4. # echo 30 > /proc/sys/kernel/softlockup_thresh これで少し様子みます。
KVMのためのlinux kernel入門
Statistics Favorites 1 Downloads 0 Comments 0 Embed Views 0 Views on SlideShare 333 Total Views 333 仮想環境では、ゲスト OS が「物理的なメモリだ」と思っている仮想物理アドレスは、実際の物理アドレスではありません。そのため、ゲスト OS がメンテナンスしているページテーブルを直接 CPU が参照すると本来アクセスしたかったメモリとは違う箇所へアクセスすることになります。 そのため、仮想物理アドレスから物理アドレスへの変換表を管理しているハイパーバイザが「 shadow page table 」と呼ばれるページテーブルを用意します。ゲスト OS が管理するページテーブルを監視し、更新があれば影のようについていく、というところからこのような名前になっています。「 CR3 」レジスタの変更もハイ
LWN.net - Linux Weekly News
LWN.net is a reader-supported news site dedicated to producing the best coverage from within the Linux and free software development communities. See the LWN FAQ for more information, and please consider subscribing to gain full access and support our activities. [Development] Posted Mar 7, 2024 15:46 UTC (Thu) by koenvervloesem While programmers are used to having tools to check their code for st
Anaconda Boot Options - Fedora Project Wiki
Anaconda boot options are described in the official Anaconda documentation on Read the Docs. The page is generated from the boot-options.rst file in the Anaconda source code repository. So if you spot any mistakes or want to improve the boot option documentation just open a pull request for this file.
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Linux crash dump 読み方入門 : LinuxのKernel crash dumpからの 障害原因調査 / ミラクル・リナックス株式会社 Asianux開発本部 吉田 https://users.miraclelinux.com/support/files/u1/OSC2008_Spring_dumpver1_1.pdf
GitHub - 0xAX/linux-insides: A little bit about a linux kernel
IBM Documentation
http://s3.amazonaws.com/ec2-downloads/
http://www.makelinux.net/kernel_map/
ju11net九州体育(科技)有限公司