ログからは見えてこない高負荷サイトのボトルネック : DSAS開発者の部屋

ちょうど１年前に「高負荷サイトのボトルネックを見つけるには」という記事を掲載していますが、この手のトラブルシューティングって結構大変で悩ましいですよね。はじめまして、新入りの@pandax381です。 ログからは見えてこないもの 「サイトの応答が遅い」という問題が発生した場合、その原因はどこにあるでしょうか。 Webアプリケーションの処理に時間が掛かっている DBサーバに投げたクエリーの応答が遅い サーバの処理能力を超えている などなど、いくつもの可能性があります。通常、上に挙げているような問題は、アプリケーションやサーバのログを調査することで、原因を突き止めることができます。 一方で、こういったログの調査だけでは、その原因にたどり着くことができなかったり、相当な苦労が伴うケースもあります。 あるサイトのある日の出来事 つい先日のことですが、KLabの運営している某ソーシャルゲームにて、サ

[rryu]

正常に性能劣化しているという状況はある意味正常なのがめんどくさい。

[adeu_w]

ログからはわからないトラブルとその解決例。ログに出ないトラブルはマジ大変。

[yasui0906]

サーバのログにもスイッチのログにもエラーは出ていて、メールでも通知が来ていたのに、完全に見落としていてアタフタしたことは反省しつつ、グラフでもSYNの再送カウンタをみれると嬉しいよね的な話題でする。

[jun_ya]

某サイトのサーバ設計時、スイッチが壊れるのはサーバが壊れるよりも壊滅的になることがあるので、サーバ予備機よりも優先して予備スイッチを買った記憶思い出した

[hirose31]

tcpeek... モニオさんとかじゃないの。。。

[hiroomi]

“TCPレイヤで発生した再送を検出するプログラムを作りました。 ・TCPセッションモニタ「tcpeek」”

[arikui]

[]

[naga_sawa]

スイッチトラブルからサーバトラブルに/平時の状態監視は大事というお話/中途半端に生きてるトラブルはタチが悪い

[h5y1m141]

ツールもだけど、障害の根本原因特定までのアプローチの解説がステキですね

[arrowKato]

TCP 3hand shake

[nasu_t]

network performance tool tcpeek tcp

[hogem]

"tcpeekは、TCPのセッション確立時に発生するエラーを監視・集計するネットワークモニタです" これは便利なので利用させてもらうとして、l2 switchの故障はsnmpでわかるような気がする。

[kuenishi]

すばらしい、が、スイッチのSNMPってないのか。

[UDONCHAN]

すばらしさ

[meets623]

DSAS開発者の部屋:ログからは見えてこない高負荷サイトのボトルネック

[takatoshiono]

すげー。こういう知識身につけたい。

[tyru]

TCPの再送を検知するプログラム tcpeek

[hiro_y]

「TCPレイヤで発生した再送を検出するプログラムを作りました。」

[kenjiskywalker]

相変わらず変態スな...

[mstk_knife]

Sent from my iPhone

[mainyaa]

いいな。変なトラフィックがDDOSかどうかの切り分けもできそう

[sakura_bird1]

DSAS開発者の部屋

[masutaro]

ネットワークトラブル。SYN再送検知。

[dokodajp]

DSAS開発者の部屋:ログからは見えてこない高負荷サイトのボトルネック

[karupanerura]

yosage

[naglfar]

パフォーマンスの悪化って基本的にアプリケーションの問題として考えがちだからなあ。もちろんアプリケーションがネックになっているケースが多いからではあるんだが、別なアプローチをする担当者もいてほしい。

[cha-cha-ki]

ほー！

[udzura]

クール

[shinodogg]

アツいなコレ…。サーバの権限無くて困ったりするけどツール化されてればOKそうだし。

[akuwano]

これは便利そーやね。入れて使ってみよっと。

[hsksyusk]

話が逸れるけどスイッチの故障はSNMPで検出できないのかしら。