CPU使用率100％のWebサーバをOSのチューニングだけでCPU使用率20%まで改善する - 人間とウェブの未来

こんばんは、 @matsumotoryです。 hb.matsumoto-r.jp 上記エントリにおいて、プロセスの大量メモリ確保に伴うページテーブルサイズとベージテーブルエントリ数の肥大化によるcloneやexecveの性能劣化とCPU使用時間の専有問題、および、それらの解決方法についてシステムコールレベルで確認しました。 そこで今回は、システムコールやそのカーネル内部の処理の性能、というよりは、より実践的な環境であるApache httpdとmod_cgiを用いて、phpinfo()を実行するだけのCGIに対してベンチマークをかけた時にどれぐらいCPUのidleが空くか、システムCPUの使用量が変わるかを、前回示した解決方法の1つであるHugePagesを使うかどうかの観点で比較してみましょう。 特定条件下のWebサーバ環境のシステムCPUに起因する高負荷問題から、システムコールやカーネ

[matsumoto_r]

HugeTableとか使ってどうにか大量のPTEの処理を効率化しようとしてたのも2年前か。

[tiisanaoppai]

ほんと、こーゆーチューニングははやく人工知能にとって変わってほしい。

[master-0717]

アプリケーションエンジニア的にはAmazonやMicrosoftやGoogleに任せてしまいたいところ。ミドルウェアのチューニングまで。

[ElizaAcolyte]

“10万vhost”というパワーワード

[Nyoho]

面白いですね。100,000仮想ホストもあるとこんなに効率アッピングするのか〜。

[terazzo]

他でもメモリ沢山使うマルチプロセスのデーモン系のやつは効き目ありそうだな

[jiro68]

ab の出力(特に単位時間当たりの処理量）も見たいな. perf の感じからすると、数十%up していてもおかしくなさそうな気がする。

[nopipi]

Hugepageでpte用メモリが節約できる以外にclone時のpte処理削減によるcpu負荷軽減が出来るんですね。勉強になります。10万vhostはスケールが違いすぎる。。。

[uokada]

いい記事だった。 最近の流れとしてAppEngineみたいなPaaS使ってちゃうとこういう知識身に付ける機会ないんだよな。

[fan-tail]

hugepage設定ミスってブートしなくなったりしたなぁ（Cent7

[yasunobuchan]

チューニング不要希望…難しい

[bootJP]

楽しそう

[joker1007]

勉強になったが、ここまで影響あるのは割と特殊なケースだな。4GBもメモリ確保してるプロセスをガンガンforkするってのは中々無い。しかしどっかで役に立つかも。

[kgrock]

CPU使用率100％のWebサーバをOSのチューニングだけでCPU使用率20%まで改善する

[oinume]

perfコマンドでkernelのパフォーマンスを確認

[rryu]

もう1つのサーバにバーチャルホストを10万とかいうレベルで集積する時代なのか……

[photoblg]

10万vhostってすごすぎ

[hitoriyokozuna]

いまじゃバケモンのように性能のいいマシンがそこそこのお値段で調達でちゃう。たまにゃこういう記事読んでアタマつかわにゃね。

[xorphitus]

良い／エンジニアの領域によってはこの辺を意識しなくてもよい環境程モダンと思うけど、それでも最終的な地力につながると思うし、触れるチャンスも多くないのでこういう記事はありがたい

[ngsw]

VirtualDocumentRootなのかな

[iku-sawa11]

一行も理解不能だった

[taruhachi]

webサーバのCPUボトルネックは仕方が無いと思っていたが、そもそそも使い方が特殊すぎるためかな。

[Shinwiki]

そういうもんだと思ってた…

[toaruR]

HugePages

[ttop]

なる。環境変数だけでいいのか

[lmhh]

“HugePages”

[miraclmann]

OSチューニング

[nandemoOKdato]

OSのチューニングだけでWebサーバのCPU使用率を100%から20%にまで改善 - 人間とウェブの未来

[fubar_foo]

mod_cgiの高速化

[an-apricot]

、

[digitalglm]

OSのチューニングだけでWebサーバのCPU使用率を100%から20%にまで改善 - 人間とウェブの未来: 2016 - 07 - 23 CPUのidleが0%のWebサーバをidle70%にまで改善 Webサーバ 研究 運用…