OpenContrailを勉強してみた - mixi engineer blog
サービス環境における仮想ネットワーク検討して、OpenContrailは追いかける価値があるのではないかと考えましたので、その過程を書こうと思います。3行でまとめると次のとおりです。 今日時点で使えそうなゲートウエイ実装を考えたときに、OpenContrailは良い選択肢です openvswitchはL2スイッチをエミュレーションしていて、OpenContrailはルータをエミュレーションしています。 macアドレスの隠蔽やmssの調整など、openvswitchではやりづらいこともケアされています。 今日の夜、OpenStack勉強会でOpenContrailの話があるらしいので、負けじと書いてみました。 背景 現在のミクシィのネットワークの悩みはたくさんありますが、特に次の２つの悩みを持っています 大きなL2ネットワークで運用する際の一般的な悩みを抱えている 単一のサービスを動かすこと
10GbE時代のネットワークI/O高速化
2015.10.3 にOSC2015 Fukuoka(＠九州産業大学）で講演した資料です。 PacemakerとPostgreSQLのレプリケーション機能を組み合わせた「PG-REX」(*)は、共有ディスクを使用しない安価な構成で、商用運用にも耐える可用性を実現することができます。 このPG-REXを含むPacemakerによるクラスタ構成は初期構築後、実際の故障が発生した際にその効果を発揮しますが、ログやコマンドが複雑で、フェイルオーバの原因を突き止めたり、 その後に正しい状態に復旧する方法がわからない、といった問い合わせを受けることが多々あります。 そこで、デモでも使用しているPG-REXを例として、故障内容によるPacemakerの挙動の違い、および原因解析方法、復旧方法を、実例を挙げながら網羅的にご説明します。 * PG-REXのコミュニティも立ち上げ、普及に努めています。 コミュ
なぜあなたがウェブサイトをHTTPS化するとサイトが遅くなってユーザーが逃げていくのか - 射撃しつつ前転 改
完全に釣りタイトルですけど中身は真面目に書くよ。 近年、ウェブサイトのHTTPS化が流行のようになっている。私の知る限り、Googleの各種サービスやTwitter、Facebookなどが完全にHTTPSで通信を行うようになっている。HTTPS、つまりSSLによる通信の暗号化によって、ユーザにこれまでよりも安全なウェブサイトを提供できる。 しかし、あなたが作っているサイトをふと思いつきでHTTPS化してしまうと、たぶん、これまでよりもサイトが遅くなる。ここでは、HTTPSで通信する場合の問題を解説する。 なぜ遅くなるのか HTTPで通信する場合、クライアントがサーバへと接続するためにはTCP/IPの3ウェイハンドシェイクという手順が必要になる。めんどくさいのでここでは詳しくは説明しないが、要するにクライアントがリクエストを投げる前にパケットを１往復させないといけないのである。パケットの往復
［L2スイッチ＋VLAN］ネットワーク仮想化入門 開発環境への仮想化導入ガイド | gihyo.jp
はじめに サーバを仮想化して運用することも一般的になり、もはや実機にOSを入れることのほうが少なくなっている、という人も多いのではないでしょうか。 本誌Vol.49の仮想化特集（編注）では「開発環境を仮想化しよう！」をテーマに、「サーバ仮想化」「ストレージ仮想化」「ネットワーク仮想化」の3つの技術について取り上げました。このうち前者の2つ、つまり「サーバを仮想化してストレージを集約する」ことは行っても、最後の「ネットワークを仮想化する」ところまで必要とされる状況は少ないかもしれません。 筆者の環境では、グローバルIPアドレスを持つサーバ群を、開発用のサーバ群と一緒に仮想化しようというところからネットワークの仮想化を導入することになりました。しかし、この分野に詳しい人が周囲におらず、最終的な形が完成するまでは試行錯誤の連続でした。 今回は、そうして積み重ねた筆者のスタイルを交えつつ、多
こんな夜中にOpenFlowでネットワークをプログラミング！ 記事一覧 | gihyo.jp
第12回【Trema編】動画放送局をIPマルチキャストで作ってみよう！ Trema プロジェクト，高宮安仁，@yasuhito，すぎょうかずし，千葉靖伸，鈴木一哉，小出俊夫，@effy55 2012-05-16 第11回【Trema編】実践あるのみ！ 生活ネットワークをOpenFlowに移行しよう Trema プロジェクト，高宮安仁，@yasuhito，すぎょうかずし，千葉靖伸，鈴木一哉，小出俊夫，@effy55 2012-04-11 第10回【Trema編】Tremaプロジェクトの深層に迫る! Trema プロジェクト，高宮安仁，@yasuhito，すぎょうかずし，千葉靖伸，鈴木一哉，小出俊夫，@effy55 2012-03-14
ヤフーネットワーク10年
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog はじめに こんにちは、ヤフーでネットワーク設計に携わって早10年の松谷と申します。 今回はヤフーネットワーク10年と題し、ヤフーの重要配信インフラの一部であるネットワークについて、過去の課題と共にご紹介していきたいと思います。 2000年 この頃のヤフーでは検索やオークションといったサービスのウェブサーバーへ、大量のアクセスが集中し高負荷になる事が多々ありました。当時、ほとんどのサービスが皆さんご存じのDNS Round Robin（以下DNSRR）で運用していました。DNSRRは非常にシンプルで優れた機能ですが、サーバー障害時にはAレコードを手動で抜く作業が必要です。またDNSの512byte問題でAレコードを束ねるのが限界にな
第1回 バーストトラフィックの発見と対処 | gihyo.jp
はじめに 初めまして、（株）ミクシィの中野和貴です。私はシステム本部運用部インフラグループネットワークチームという部署で働いており、ほかのメンバーと共にmixiのネットワーク部分全般に関して設計・保守・運用を行っています。ここでは『WEB+DB Press』Vol.50～55にて連載されていた「大規模Webサービスの裏側」で紹介しきれなかったエピソードや、その後のインフラ事情を紹介していきます。 日々大量のトラフィックが流れるmixiのネットワークですが、大きくなってくるとやはりいろいろな問題も出てきます。今回はそれらの問題の中で普段運用しているとなかなか気付きにくいバーストトラフィックに起因する問題事例を紹介します。 ミクシィのネットワーク構成と問題の発覚 mixiでは主要なネットワーク機材にはお金をかけていますが、サービス規模からどうしてもラック数が多くなってしまうため、エッジスイッ
ostinato - Project Hosting on Google Code
💰 Launch discount for 100Gbps line rate traffic - Go Turbo! 🚀 Whether you are testing circuit bandwidth, storm control, L2/L3 forwarding, QOS, load balancing, SD WAN application policies, multicast snooping or any of the other myriad things network engineers do during their day, you need to test with traffic - in lab or production. Why test with traffic? Imagine, ACL rules not working as expecte
ローカルポートを食いつぶしていた話 - download_takeshi’s diary
ここのところ、お仕事で管理しているシステムで、夜中に負荷が急上昇する事象が発生しており、夜な夜な対応に追われていました。 （このブログ書いている今も、負荷がじわじわ上昇中なんですが・・・） で、いろいろと調査した結果、ようやく糸口がわかってきました。 結論から言うと、ローカルポートなどのネットワーク資源を食いつぶしていたようです。 以下、調べていってわかったことなどのメモです。 トラブルの事象 運用しているのは Apache2.2 + mod_perl2 なwebサーバで、リスティング広告システムの配信系です。 リスティング広告の配信のシステムって一般的にロジックが複雑でいやーな感じなんですが、このシステムもご他聞に漏れずかなりのひねくれ者で、しかもトラヒックは結構多めです。システム全体で、日に1000万〜2000万クエリくらいかな。幸か不幸か、このご時勢においてもトラヒック的には成長し続
netstatコマンドを使いこなす ＠IT：Windows TIPS -- Tips：
TCP/IP関連のトラブルシューティングを行う場合に、必ずといってよいほど使うコマンドとして「netstat」コマンドがある（実行ファイル名はnetstat.exe）。このコマンドは、主にTCPの通信状態を調べるためには必須であり、ぜひともその使い方をマスターしておきたい。 netstatの基本――通信中のTCPコネクションの調査 netstatコマンドの最も基本的な使い方は、通信中のTCPコネクション（TCP接続）の状態を表示させることである。このコマンドを実行すると、ローカルPCのTCP/IPプロトコルスタック上において、現在アクティブになっているTCP通信の状態を表示できる。 ●「TCP」とは？ 「コネクション」とは？ TCPとは、2つのアプリケーション間で、信頼性のある通信路（コネクション）を開設し、お互いにデータなどをやりとりするための機能である。通信するアプリケーションは、同一
[unix] Linux SYNパケット取りこぼし (2) 2007-05-21 - LowPriority
前回の続き。 パケット自体を零さずに処理に入った後にSYNを落とすのは以下3パターン。 syncookie無効時にsynのbacklog(tcp_max_syn_backlog)が溢れている listenのbacklogが溢れている(3way-handshake完了後のaccept待ち接続) net.ipv4.tcp_tw_recycleの制限に抵触 で、今回問題になっていたのは最後のtcp_tw_recycleへの抵触だった。 現象として発生しうるのは、以下の条件をすべて満たす場合 サーバ側でnet.ipv4.tcp_tw_recycleが有効 TCPタイムスタンプオプションを使用 同一IPからの接続でセッションを跨ぐとセットされるTCPタイムスタンプの値が戻る場合がある 最後の条件が微妙だが、TCPタイムスタンプの値としてセットされる値は起動時を 起算時にしていたりと実装によって初期値
![[unix] Linux SYNパケット取りこぼし (2) 2007-05-21 - LowPriority](https://cdn-ak-scissors.b.st-hatena.com/image/square/264702d4cb37ced3c2fd5dda6a1368c235356862/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F17680117127119925553%2F17680117127119930188%2F1557218483)
Vyatta――クラウド時代の仮想ルータ活用術：実践編（2/2） － ＠IT
セキュリティ対策からクラウド間接続まで Vyatta――クラウド時代の仮想ルータ活用術：実践編 松本直人 日本Vyattaユーザー会 運営委員 さくらインターネット研究所 上級研究員 2010/12/8 クラウドとクラウドをつなぐ「クラウドブリッジ」 Vyattaには最近、クラウドとクラウドなどをLAN間接続する「クラウドブリッジ」（Layer 2 Bridging）機能が加わりました。 これはOpenVPNによる相互接続で実現され、ルータそれぞれのeth1インターフェイスに接続されるネットワークは同一LANとして見えるようになります。これにより、セグメント分割やルーティング設定などの作業から解放され、より柔軟に、クラウド環境や自社データセンター設備との間で設定を共有することができます。 注意点としては、shared-secret-key-fileで示される鍵ファイルは事前に相互で共有して
さくらインターネットのネットワーク構成:Geekなぺーじ
先月、さくらインターネットのネットワーク構成を調べました。 興味がある方はどうぞ。 IPv4によるAS間接続 まず、whoisを利用して、さくらインターネットが保持しているASを調べてみると、AS9370、AS9371、AS7684の３つあることがわかります。 次に、それらのAS番号を基にCyclopsで調べると、各ASと接続されているASに関しての情報がわかります。 Cyclopsは、世界各所で公開されているBGPフルルート情報をまとめて見やすくしてくれるネットサービスです。 結構素敵なので良く使ってます。 Cyclopsに掲載されている情報を見ると、以下のように東京と大阪のAS同士でEBGP接続を行っていることがわかります。 EBGP的に東京と大阪を接続することで、東京と大阪の間が完全に切断されたとしても大丈夫になるような冗長構成にしてあるようです。 この図では、さくらインターネットの
被害のメカニズムから守り方まで ネットワークの落雷対策:Part1 / SAFETY JAPAN [特集] / 日経BP社
「地震，雷，火事，おやじ」と怖いものの代表とされてきた雷は，現代のネットワークにとっても大きな脅威である。家庭や企業のネットワークは，通信ケーブルや電源，アンテナなど，数多くのポイントで屋外とつながっている。つまり，入りやすくしかも出やすいという，雷にとって格好の標的なのだ。近くに落雷があると，どこかから侵入して機器を破壊しながらネットワークを抜けていくことになる。 被害が発生するまでのメカニズムを理解して正しい守り方を知っておこう。 文／阿蘇 和人（日経NETWORK） 2006年8月22日 Part2はこちら >> Part3はこちら >> 1万ボルト超の大電流 抜け道を探しながらやってくる 夏といえば雷だ。突然かき曇る空に雷鳴がとどろき，稲妻が光る。近くに落ちると，家やオフィスのパソコンが壊れたりしないか不安になる。 機器の破壊や停電を引き起こす 電力によっ
[ライブドア]クラウド時代に必要な技術と人材｜クラウド・コンピューティングの「いま」を追いつづけるCloudZine（クラウドジン）
[ライブドア]クラウド時代に必要な技術と人材 先月、東京大学本郷キャンパスにおいて情報通信技術教育者合同会議2010が2日間に渡り開催された。 先月、東京大学本郷キャンパスにおいて情報通信技術教育者合同会議2010が2日間に渡り開催された。その中で「クラウド時代に必要な技術と人材」と題し、東京大学情報理工学系研究科特任講師の土本康生氏がモデレータとなり、シトリックス・システムズ・ジャパン株式会社の村上愼一氏、独立行政法人情報通信研究機構の三輪信介氏、そして筆者を含む3名をパネリストとするパネルディスカッションが催された。そこでクラウドコンピューティングの技術動向や市場構造における現状を踏まえ、どのような能力を持つ人材が今後必要とされていくかという議論が交わされた。そのディスカッションで最終的な結論が出た訳ではないが、パネリスト達の共通認識として、今、必要とされるのはサーバシステムとネットワ
4Gamer.net — [CEDEC 2010]ネットゲームの裏で何が起こっているのか。ネットワークエンジニアから見た，ゲームデザインの大原則
[CEDEC 2010]ネットゲームの裏で何が起こっているのか。ネットワークエンジニアから見た，ゲームデザインの大原則 編集部：touge 先週行われた「CEDEC 2010」の講演から「ネットワークゲームの仕組みとゲームデザイン」と題されたセッションを紹介しよう。 「CEDEC 2010」公式サイト 登壇したのは，セガ第三CS研究開発部のテクニカルディレクター 節政暁生氏。節政氏は「ファンタシースター オンライン」シリーズのプログラマとして，長年ネットワークゲーム（オンラインゲーム）の開発を手がけてきてきた人物だ。この講演では，その経験からネットワークゲームのゲームデザインにおいて，気をつけるべきことについてのレクチャーが行われた。その内容には一部技術的な要素を含むものの，基本的にはプランナーに向けたものであるため，理解にそれほど専門的な知識は必要ない。いわばネットワークの基礎の基礎にあ
![4Gamer.net — [CEDEC 2010]ネットゲームの裏で何が起こっているのか。ネットワークエンジニアから見た，ゲームデザインの大原則](https://cdn-ak-scissors.b.st-hatena.com/image/square/ba2b74f4bf8449048ce5025fbdac545d7519da6a/height=288;version=1;width=512/https%3A%2F%2Fwww.4gamer.net%2Fgames%2F105%2FG010549%2F20100905002%2FTN%2F002.jpg)
Free Web Hosting - Your Website need to be migrated
Transfer your website 24/7 Customer support 99.99% Uptime guarantee Unlimited websites Start Now Meet your success halfway. Web hosting with Real power. Single & Premium Hosting plans for any project! The power of cutting-edge hardware meets intuitive software built on years of experience - you get all this and more with Hostinger. Every tool you need to start your online success story. Take advan
＠IT：Windows TIPS -- Tips：不整合を起こしたオフライン・ファイル機能を復活させる
オフライン・ファイルは便利な機能だが、時としてネットワーク・ファイルとローカル・キャッシュの間で不整合が発生し、正常に機能しなくなる場合がある。 オフライン・ファイル機能は、ネットワーク・ファイルをローカル・キャッシュとして保持しておき、オフライン時（ネットワーク未接続時）にはこのキャッシュを参照したり変更したりすることで、あたかもネットワークに接続されているように、ネットワーク・ファイルの内容をアクセス可能にする機能である。オフライン時に更新された内容は、次回のネットワーク接続時に自動的にネットワーク・ファイルと同期される。特にノートPCなどをオフィスのLANに接続したり、切断して持ち歩いたりする場合には便利な機能だ。 大変便利な機能なのだが、ときに同期しているはずのネットワーク・ファイルとローカル・キャッシュの間で不整合が発生し、オフライン・ファイル機能が動作不良に陥る場合がある。あれ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
DNSの「浸透問題」は都市伝説――正しいサーバー引っ越し法を解説 - INTERNET Watch Watch
仮想ネットワークの実装で学ぶTCP/IP一覧
