ISUCON7予選の上位陣の戦略まとめ - Bit Journey's Tech Blog
Speee社でISUCON7の復習会をやったのでその資料を公開します。 ISUCON7復習会 2017/11/08 at Speee Lounge. original repo: https://github.com/isucon/isucon7-qualify 概要 ISUCON7の予選突破組の上位陣の戦略をいくつか分析してみました。 †空中庭園†《ガーデンプレイス》 repo: https://github.com/ryotarai/isucon7q http://eagletmt.hateblo.jp/entry/2017/10/24/010832 https://mozami.me/2017/10/24/isucon7_qualify.html スギャブロエックス repo: https://github.com/gfx/isucon7-qualify http://memo.su
New RelicのAPMでPythonアプリを監視する（Flask編） - Qiita
はじめに New RelicのAPMでPythonアプリを監視してみます。Pythonはフレームワークが多種多様で、Webでの公開手法も幅が広いのですが、まずはなるべくシンプルな形でNew RelicとPythonアプリの連携方法をご紹介したいと思います。今回はFlaskで作った単純なアプリにNew Relicのコードを埋め込んで監視画面に表示させるまでの流れを確認します。 環境 CentOS 7 Python 2.7.5(default) New Relicのアカウントがあることが前提です。LICENSE-KEYは適宜読み替えてください。 New Relic APMのセットアップ Python Agentのインストール 公式の手順に沿ってインストールします。 私の環境の例。若干古いので最新版はこちら。 # wget https://download.newrelic.com/python
スローログの集計に便利な「pt-query-digest」を使ってみよう
今回は「pt-query-digest」を使用して、チューニングしたいSQLがスローログに記録されている場合の調査方法について説明します。 pt-query-digestとは pt-query-digestはPercona社が開発・配布するMySQL用のユーティリティーキットで、「Percona Toolkit」の1つです。最新ドキュメント（2016/3/22現在）はこちらにあります。pt-query-digestの基本的な使い方は「スローログをノーマライズ・集計し、人間が判断しやすい形式で出力させる」です。基本的にはスローログ用と考えますが、スローログ以外にもジェネラルログやバイナリーログ（mysqlbinlogコマンドの出力を入力する）、パケットキャプチャー（tcpdumpコマンドの出力を入力する）などが利用可能です。 Percona Toolkitのインストール まずはPercona
ざっくりと #isucon 2013年予選問題の解き方教えます : ISUCON公式Blog
こんにちは、@acidlemon です。 ざっくりと書いたつもりなのに長編です。 本エントリでは、スコアがなかなか伸びなかった方々を主な対象として、実際に先週末実施した予選問題を解いていく方法を解説します。高スコアをたたき出した方々は参考までに「こんなやりかたでもここまでスコア伸びるんだなー」という感じで読んでください。 最初の方針は「派手なことをしない」「コンサバにやる」です。「とりあえず」という気持ちでmemcachedやRedis、もしくはvarnishやnginxでキャッシュし始めるとキャッシュの寿命のことを考え始めなければならず、疑心暗鬼になったりして難易度が上がります。まぁその辺は最終的には男気によって解決するものなのですが、その要素を排除したままできるだけスコアを上げてみましょう。 日曜夜よりアップされたみなさんの感想エントリなども拝見しており、やっぱオンメモリに置くのは速い
ISUCONってなんだ - Qiita
※このスライドは2017/08/10 に社内LTで話した内容です。社内要素はゼロだったので本家Qiitaに投稿しています。ISUCONに関して間違ったことが書かれているのを見つけた方は編集リクエスト,コメント等お願いします 今日話すこと 今日話すこと ISUCONってなんだ どうやって競うのか ISUCON6予選問題をざっくり紹介 まとめ ISUCON = Iikanjini Speed Up Contest ウェブアプリチューニングのスコアを競う大会 LINE 株式会社 主催 2011年〜 これまで6回開催 今年も10月に開催予定 優勝賞金100万円 ISUCON = Iikanjini Speed Up Contest ウェブアプリチューニングのスコアを競う大会 LINE 株式会社 主催 2011年〜 これまで6回開催 今年も10月に開催予定 優勝賞金100万円！！！ どうやって競うの
ISUCON6予選やった - あんパン
Iikanji Speed Up CONtestというのが毎年あって、それの第6回の予選に出た。2日目日曜日の方。去年も出ていたのだけど、全く意味わからなかった。今年は少しマトモで、決勝こそでられなかったもののそこそこのスコアになったので満足といった感じ。これくらい↓ 一つ情報を追加しておくと、前日の夜くらいまで38度近い熱があって死んでいた。当日の朝に36度台に下がって、ISUCON終了ごろには37.5度というステータスだった。 それはさておき僕がやったことは以下4点。なお言語はPerlです。 isutarのisuda統合 キーワードリストをmemcachedに載せる ページングをmemcachedでやる is_spam_contentのレスポンスをキャッシュに載せる isutarのisuda統合 ぱっと見たときに、isuda.psgiとisutar.psgiがあって最悪な気持ちしかなか
来年の isucon で泣かずに予選を終える為のメモ（1） - ようへいの日々精進XP
tl;dr isucon6 予選の反省点 過去問や解析ツールのメモ Apache / Nginx アクセスログの解析 MySQL スローログの解析 アプリケーションの解析 過去問 matsuu さんに感謝 isucon5 の予選で利用された問題を展開する例 ボクがログインしたらやれそうなこと... これだったら出来そう Nginx ログの解析 MySQL SlowLog 取得の設定 アプリケーション解析の設定 ひとまず tl;dr isucon6 予選は何も出来ずに涙を飲んだので、来年は少しでも手を動かせるように過去問を触りながら isucon の雰囲気に慣れていきたい。 isucon6 予選の反省点 どの言語でとか等のチーム方針が明確では無かった チーム方針が明確では無かったので当然役割分担も不明瞭だった 過去問に触れずに挑んだ為、何をすれば良いのか全く解らなかった 各種解析ツールの存在
ISUCON 5でalpを使ってNginxのログを解析した話 - Masteries
2015年9月28日12時8分: 作者の@tkuchikiさんからコメントで指摘頂いた部分を修正いたしました. ありがとうございます! アクセスログの解析ツールとして, YAPC::Asia 2015で@kazeburoさんがkataribeを紹介していました(ISUCONの勝ち方)が, ISUCON 5直前にalpというツールがリリースされていて, 今回はこれを使って予選に挑戦しました. ...というわけで, インストール方法や使い方等, チームメンバーに共有するために作ったドキュメントをサルベージしておくことにします. ただ, 基本的にはalpのREADMEに書かれている通りなので, そちらを見る方が早いと思います! (或いは, 作者の方による紹介エントリを読むのもいいでしょう!) tkuchiki.hatenablog.com インストール 9月27日現在の最新版であるv0.0.4の
ISUCON4 予選でアプリケーションを変更せずに予選通過ラインを突破するの術 - Hateburo: kazeburo hatenablog
AMIが公開されたのでもう一度やってみた。 AMIについてはこちらのエントリに書かれています ISUCON4 予選問題の解説と講評 ＆ AMIの公開 : ISUCON公式Blog まず ami-e3577fe2 を m3.xlargeで起動します。 CPUは model name : Intel(R) Xeon(R) CPU E5-2670 v2 @ 2.50GHz でした。 とりあえず、MySQLのindexを追加する。init.shに追加 $ cat init.sh cat <<'EOF' | mysql -h ${myhost} -P ${myport} -u ${myuser} ${mydb} alter table login_log add index ip (ip), add index user_id (user_id); EOF ベンチマークツールのhttp keepal
ISUCON6 予選問題 参照実装ならびにベンチマーカー等の公開 : ISUCON公式Blog
ISUCON6の予選問題作成メイン担当のSongmuです。皆さん予選はいかがでしたか？至らぬ点もあり申し訳ない部分もありましたが、楽しんでいただけたようであれば嬉しいです。 さて、遅くなりましたがISUCON6予選に使用した参照実装、ベンチマーカー、その他諸々を含むリポジトリを、このエントリと共に公開します。 https://github.com/isucon/isucon6-qualify 謝辞問題作成にあたり、多くの人に協力いただきました。以下に役割分担を書き出してみると非常に豪華な面々です。これらの方々の協力なしには予選は開催できなかったでしょう(本当に!)。ありがとうございました。 問題アイデア出し: Songmu/motemen/wtatsuruコンセプト実装: motemen初期実装: Songmu参加者用ポータル作成: motemenベンチマーカー及びワーカー: Songmu
ISUCON6 で優勝しました : DSAS開発者の部屋
@methane です。タイトルの通り、 ISUCON でとうとう優勝してきました。 チームメンバーは、(予選と同じく) @kizkoh (インフラ担当), @mecha_g3 (アプリ担当) でした。 私は予選のときはガッツリとアプリを書いていたのですが、本戦では netstat -tn (←老害), top, dstat -ai, sudo perf top などをみつつ指示をだしたり、方針を決めたり、完全に未経験だった node.js & react.js 対策をしたりが主な仕事で、あとは序盤のインフラのタスクが大量にあるときに MySQL を docker から外して基本的なチューニングを入れたり Go を100行程度書いただけです。 結果的には優勝できましたが、メンバーの2人がよく準備し本番でも実力を発揮してくれたのに対して 僕の戦略ミスで中盤から全くスコアを上げられなかったので
インフラ部門で働くCプログラマの話
BabelとWebPackを使ってES6からブラウザで動く環境を作るための登壇資料。半分ライブコーディング的に動かしているので、スライドだけだと少々わかりにくいかもしれません。 ※ 後日LIGブログで記事にするかもです
ISUCON初出場と予選通過 - joker1007’s diary
少し前にtagomorisさんと飲んでたらISUCON出ようぜーって誘われたので、一緒に出ることになりました。 メンバーは、私(joker1007)、tagomoris, tnmtの3人。 今までの職場で一緒にISUCON出ようって感じの人が周りに居なかったので、今回何気に初参加だったのでえらい緊張してました。 特にモリスさんはISUCON無敗神話を持ってたので、足引っぱらないか不安でしたね。 前日に素振りした感じでは、Webアプリとして真っ当にチューニングしてスコア出せる感じなら大体いけるやろーと思ってたんですが、当日のあの問題の感じでは割と焦りまくりでした。 やった事は大体以下の様な感じ。 isutarを統合する (不要なマイクロサービスは殺すべし) keywordリストを全部redisに乗っける 瞬間的に各keywordに大量のアクセスが来てunicornが詰まるのでpumaに変える
ISUCON6予選をトップ通過しました : DSAS開発者の部屋
@methane です。「この技術部には問題がある！」というチーム名で @kizkoh (インフラ担当), @mecha_g3 (アプリ担当) とともに ISUCON 6 に参戦し、予選をトップスコアで通過しました。 恒例のふりかえり記事を書きます。 ふりかえり 残念ながらスコアは記録してないのですが、時系列順にやったことをまとめます。 アプリのコードは methane/isu6q-app で公開しているので、興味がある方はコードを確認してください。 strings.Replacer を使う 使用言語は最初から Go と決めていたのですが、Goの初期実装は遅すぎてタイムアウトで最初からスコア無しでした。 top でアプリのCPUが支配的なのはすぐ判りましたし、コードを読めばなにが遅いのかも一発で判りました。そんなに長くないので関数全体を張ります。 func htmlify(w http.R
ISUCON6に「C0-100%」チームで参加してきた - hitode909の日記
id:hakobe932とid:hatz48の3人で「C0-100%」というチームで出てきた．結果は予選敗退． アプリケーションエンジニア3人で，テストを書いて安全に作ろうという作戦で進めていた． 準備 ISUCONだからといって乱暴にコードを書かず，普段通りの正しい安全なオペレーションをしよう，という話をして，ISUCON4と5で練習して，便利グッズを整えたり，デプロイの練習をしたりしていた． ローカルでセットアップするスクリプトを用意 Mechanizeでテストを書けるように Devel::Coverでカバレッジを取れるように Devel::NYTProfでプロファイリングできるように CircleCIに乗せる CIが通ったらデプロイ デプロイされたらSlackに通知が来る mackerelで外形監視 ISUCON4の練習ではC0 100%を達成できて，順調な雰囲気だった． 前日に集ま
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ベンチマークツール"wrk"で自由にリクエストを送る - Qiita
ISUCON7 ワイルドワイクボタ - HackMD
GitHub - kazuki/isucon4: ISUCON4 予選の思い出
GitHub - ktateish/isucon6-practice-go
SSSSLIDE
