Linuxでロードバランサやキャッシュサーバをマルチコアスケールさせるためのカーネルチューニング - ゆううきブログ
本記事の公開後の2016年7月にはてなにおけるチューニング事例を紹介した。 はてなにおけるLinuxネットワークスタックパフォーマンス改善 / Linux network performance improvement at hatena - Speaker Deck HAProxy や nginx などのソフトウェアロードバランサやリバースプロキシ、memcached などの KVS のような高パケットレートになりやすいネットワークアプリケーションにおいて、単一の CPU コアに負荷が偏り、マルチコアスケールしないことがあります。 今回は、このようなネットワークアプリケーションにおいて CPU 負荷がマルチコアスケールしない理由と、マルチコアスケールさせるための Linux カーネルのネットワークスタックのチューニング手法として RFS (Receive Flow Steering) を
4.4. TCP_NODELAY と小さなバッファ書き込み
TCP (Transmission Control Protocol) で簡単に説明したように、デフォルトでは TCP は Nagle アルゴリズムを使用して小さな送信パケットを収集して一度にすべてのパケットを送信します。 これにより、 レイテンシに悪い影響が出ることがあります。
よくわかるLinux帯域制限 | GREE Engineering
矢口です。 みなさんはLinuxのtcという機能をご存知でしょうか。送信するパケットの帯域制御を行うことができる大変強力な機能で、グリーでもいくつかの用途で使用されています。 具体的な事例の一つはRedisです。Redisではreplicationを新規に開始する際やfailoverが発生しmasterが切り替わった際(特に2.6系)にストアされている全データが転送されます。しかし帯域制限をかける機能がないため、ネットワーク帯域を圧迫してしまう危険性があります。また通常のクライアントとの通信でも大量のクエリにより予想以上の帯域を使用してしまう可能性があります。このような場合にtcを用いることでRedisの使用する帯域をコントロールできます。 このように有用なtcですが残念なことに日本語/英語ともにわかりやすい解説や詳細な情報は多くありません。 私も社内において使われていたtcの設定に問題が
GuestOS on KVM on CloudCore
CloudCoreはホスト側で仮想化支援機能をNestしてくれているようで、仮想サーバ上で更に仮想サーバを起動できる。 # cat /proc/cpuinfo |grep svm flags : fpu vme de pse tsc msr pae mce cx8 apic mtrr pge mca cmov pat pse36 clflush mmx fxsr sse sse2 syscall nx mmxext fxsr_opt pdpe1gb lm up rep_good extd_apicid unfair_spinlock pni cx16 popcnt hypervisor lahf_lm cmp_legacy svm cr8_legacy abm sse4a misalignsse 3dnowprefetch npt KVM関連をインストールする。 # yum install
KVMでvlanを使う - ngyukiの日記
以下の通り構成でKVMでVLANを使ったときのメモ 構成 +------------------------+ | L2SW | +---------[port1]--------+ | | (vlan:10) | +--------[eth1]----------+ | ホスト | | | (eth1.10) | | | | | (br_vlan10) | | | | +--------[vnetX]---------+ | | | +---------[eth0]---------+ | ゲスト | +------------------------+※KVMホストに入ってくるトラフィックは全てタグVLANで、ホストでタグを外してゲストに転送 ※物理I/FはVLANの仮想I/Fを通して間接的にブリッジに含まれている メモ 上の構成をそのまま設定しただけでは、L2SW〜KVMゲスト間で疎
CentOS5.5におけるKVMゲストサーバのためのブリッジインタフェースの作成
CentOS5.5におけるKVMゲストサーバのためのブリッジインタフェースの作成 ゲストサーバのインタフェースをブリッジで提供する、NATで提供するの方法がありますが、今回はゲストサーバを"外"に晒すので、ブリッジの方法を採ります。 ■NetworkManagerを止める [root@gold ~]# chkconfig --list NetworkManager NetworkManager 0:off 1:off 2:off 3:off 4:off 5:off 6:off [root@gold ~]# /etc/rc.d/init.d/NetworkManager status NetworkManager は停止しています ■ブリッジインタフェースの作成 タグVLANかつボンディングしているインタフェースのブリッジインタフェースを作ります。 元あるインタフェース設定ファイルをひな形に
iftop: display bandwidth usage on an interface
iftop does for network usage what top(1) does for CPU usage. It listens to network traffic on a named interface and displays a table of current bandwidth usage by pairs of hosts. Handy for answering the question "why is our ADSL link so slow?". Requirements libpcap libcurses Download The latest stable version of iftop is 0.17. Older and newer (pre-release) version are available from the downloads
Linuxで802.1qタグつきVLAN - inuzのブログ
802.1qとは 普通のパケットに、VLANタグをつけてカプセル化するための規格。当然受け側も対応が必要。1つのインタフェースで複数のVLANのパケットを流せるのが美味しい。 構成 <<Network_A>>───[賢いスイッチ]───<<Network_B>> ┃ <<Network_A,B両方の足を持ったホスト>>縦の太い線の部分が、802.1qでカプセル化したパケットが通るところ。当然1本。Cat5eEtherケーブル。 スイッチ側の設定 賢いスイッチにはCatalyst 2924を使うことに。 ! interface FastEthernet0/1 switchport access vlan 3 ! interface FastEthernet0/2 switchport trunk encapsulation dot1q switchport trunk allowed vla
TheC10kProblem - 「C10K問題」（クライアント1万台問題）とは、ハードウェアの性能上は問題がなくても、あまりにもクライアントの数が多くなるとサーバがパンクする問題のこと
TheC10kProblem - 「C10K問題」（クライアント1万台問題）とは、ハードウェアの性能上は問題がなくても、あまりにもクライアントの数が多くなるとサーバがパンクする問題のこと 目次 この文書について C10K 問題 関連サイト まず読むべき本 I/O フレームワーク I/O 戦略 1. 各スレッドが複数のクライアントを受け付ける. そしてノンブロッキング I/O と レベル・トリガ型の完了通知を利用する. 伝統的な select() 伝統的な poll() /dev/poll kqueue() 2. 各スレッドが複数のクライアントを受け付ける. そしてノンブロッキング I/O と 変更型の完了通知(readiness change notification)を利用する. kqueue() epoll リアルタイム・シグナル fd 単位のシグナル (Signal-per-fd)
ネットワークプログラミングの基礎知識
ネットワークプログラミングの基礎知識 ここでは IP アドレスやポート番号、クライアントとサーバの役割などを説明し、 perl・C言語・Java などでソケット (Socket) を使った HTTP クライアントや POP3 クライアント、簡単なサーバを作成してみます。 要はネットワークプログラミングをやってみよう、ということです。 このページのサンプルプログラムは、RFC などの規格に準拠した「正しい」プログラムではありません。 また、全体的にエラー処理が不十分です (今後改善する予定です)。 あくまでも概要を理解するためのサンプルととらえてください。 もし本気でしっかりとしたクライアントやサーバを書きたいなら、このページを読んだ上で、 さらに RFC を熟読し、そして wget・Apache・ftp コマンドなどのソースを参考にしてください。 このページに間違いを見付けたら、掲示板 で
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Redirecting…
はてなブログ | 無料ブログを作成しよう