［3］Linuxカーネルの“巨大なロック”が原因と判明

大規模サイトの性能改善作業とは、どういうものなのか――。リクルートの中古車情報サイト「カーセンサーnet」を全面リニューアルした体験を基に、その実態をレポートする。第1回、第2回はミドルウエアのチューニングを行った。後半はLinuxカーネルに原因があると判明するまでの調査に進む。様々なツールを組み合わせて追跡していった。 中古車情報サイト「カーセンサーnet」の性能試験が本格的に始まって10日目。試験の開始当初は、ブラウザーの表示に10秒もかかるなど目標性能に遠く及ばなかった。しかし前回までで紹介したように、ファイル共有システム「NFS」の設定変更、Webサーバー「Apache」のパラメーター修正、PHPアプリケーションの見直しによって、性能は劇的に向上した。 リクルート入社3年目の私は、今回の性能検証プロジェクトのリーダーとして、得意分野を持つチームメンバーと一緒に対策を進めていた。カッ

[y-kawaz]

カーセンサーすげーｗｗｗｗｗ／かなり興味深いことになってきた、明日公開予定の完結編が楽しみだｗ／でもこれ僕ならhttpdに当たりが付いた辺りでカーネルに踏み込むの諦めてnginx+pfp-fpm試してみようとか思っちゃうな…

[nobusue]

だんだん面白くなってきた

[zroff]

引きがうまいね。

[ratotopq]

だんだん面白くなってきた：）

[shodai]

　こういうのは分かった瞬間は本当にうれしい

[moerrari]

BKL(BigKernelLock)を搭載している古いカーネルのApacheでPHPをNFS上で実行するときに再現する不具合とのこと/その4のブコメによるとNFSより「DRBD」を使う方が良いとのこと。

[nilab]

_［3］Linuxカーネルの“巨大なロック”が原因と判明 - 実録！「カーセンサーnet」リニューアル奮闘記：ITpro : OProfileは、Linuxシステム向けのプロファイラー

[mantol]

おお・・・いのっちすごい！

[h5y1m141]

どうやって原因特定していったのかプロセスを丁寧に解説してくれている。あとはてブのコメントも読むと、違った解決方法についても知れるから、違った味が楽しめるお菓子を食べた気分でお徳ｗ

[hirsato]

［3］Linuxカーネルの“巨大なロック”が原因と判明 - 実録！「カーセンサーnet」リニューアル奮闘記：ITpro

[napsucks]

クソプログラムのバグ出しは大変だなｗ　内部でhostname呼ぶとかアホがプログラム作ってるとしか思えん。

[Marin_MTB]

ここまで追いかけるのは凄いなぁ。

[fukaoi]

ある意味カーネル探検隊になっているんだけど・・・ここまで調査に時間を避けれる職場環境がうらやましいけどね。

[kkobayashi]

書き方がうまいね／ん、続きは？

[balor]

php

[ortica]

[search:セマフォー][search:大規模サイト][h:keyword:OProfile][h:keyword:SystemTap]

[inocci_jp]

久々に読んだけど参考になった笑　似たようなところで引っかかっている人意外といるんですね‥

[at_yasu]

Apache+PHP で、LinuxKernelがセマフォを噛んでた話。nginx+fphpという方法もあるのになぁ…と思うなど

[nobyuki]

引きがぱない

[bb_river]

「セマフォー」と長音記号を入れられるだけでとても違和感を感じる。慣れって怖いな。

[lp008962]

コレ系は「3000req/secと戦う」(http://d.hatena.ne.jp/hirafoo/20110923/1316756766)以来だったから、最初はえっ…と思ったけど、是非続きを見たい。

[kokorohamoe]

まずはApacheのMPM（カーネルの使い方）を書いてくれないとなんともいえない。

[OhYeah]

OProfileっと

[cha-cha-ki]

パフォチューあるある？w / すごいなー

[manji6]

きちんと調査の流れが書いてあって、非インフラエンジニアとしては興味深い。

[vid]

いいところで「続く」。

[luccafort]

ほむほむ、あとで読む。

[Hash]

リクルートのカーセンサー開発のお話。ほむ

[Cherenkov]

リクルート こんなこともやるんだ

[indication]

使える