Dockerホストのパフォーマンスを引き出すTCPカーネルパラメータチューニング - tehepero note(・ω<)

2016 - 08 - 12 Dockerホストのパフォーマンスを引き出すTCPカーネルパラメータチューニング Docker Linux もう半年くらいフルDockerでmicroservicesなサービスを運用してるんですが、イマイチパフォーマンスを出し切れていないなという面がありまして、今回Dockerホストの TCP カーネル パラメータを抜本的に見直しました。 そしたら劇的に症状が改善して、 インスタンス 数も削減できた上に安定して メシウマ状態 になったので紹介します。実際効果があったのでチューニングポイントとしてはある程度正解であったと考えていますが、もちろん扱ってるアプリケーションの特性にもよるはずなので一つの ケーススタディ であることをご了承頂ければと。 前提 まずは今回のお話の前提を。こんな環境です。 EC2 c3.xlarge ホストは Ubuntu （EC2 Opt

[yoshikidz]

dockerじゃなくても普通にやってるものかと思ってた。どっかである程度絞らないと性能限界超えたら死にそうだけど。

[tmatsuu]

最近の自分の知見としてはLISTENしてるポートで大量発生するTIME_WAITは気にする必要ない、もしくはHTTP-KeepAlive使えばいいし、local_port_rangeを消費する接続しにいく側もHTTP-KeepAliveやコネクションプーリングを使えば大体解決

[kabacsharp]

うーんTCPチューニング、スライディングウィンドウをうまく回すのかあ。

[key_amb]

EC2 の somaxconn, backlog, local_port_range, tcp_tw_reuse

[progrhyme]

EC2 の somaxconn, backlog, local_port_range, tcp_tw_reuse

[mapk0y]

名前空間が分かれてるので、ネットワーク周りのパラメータはコンテナごとに制御できるはず。それらを制御するのに--sysctl は良い

[IGA-OS]

要するにフルにネットワークリソースを使い切る感じ？サーバーはハード的に余裕なのかね。

[ya--mada]

ｧｧ、ﾏｧ、ｿﾔﾅ

[ryunosinfx]

無知無知してるとこれはこれは参考に成る。

[fan-tail]

docker関係ない印象。固定的にポート使う系サービスを提供なのでエフェメラルポートはむしろ絞ってるなぁ。

[kimutansk]

コンテナではなくホストで調整しろというのはその通りで、パラメータはありがたい。コンテナ側の設定用途はそういう用途と考えると確かに。

[smbd]

"また、どこかにボトルネックがあって場合にTIME_WAITが増えるようになった場合、通信の多いアプリケーションでは致命傷を負いやすくなります。" なるほど

[lulichn]

普通に弄るべきパラメータだけだった

[nishidy]

tcp_fin_timeoutを1にするとすぐに再利用可能になると思う。tcp_tw_reuseは変えてなかったので、TIME_WAITの時間を極限まで短くする感じ。

[sekt2o]

このような実践的な情報がありがたい