[B! benchmark] amari3のブックマーク

RDS for Auroraのハイエンドインスタンスでベンチマークを実行してみた

手順ベンチマークの手順については、弊社がさくらナレッジさんに寄稿させて頂いた「さくら専用サーバでベンチマークを実施してみた～手順編～」という記事と同じものを用いています。 Auroraのパラメータについては、以下の変数以外は全てデフォルトにしています。 query_cache_type=OFFに変更 → クエリキャッシュによる高速化を防ぐため innodb_buffer_pool_size=64Gに変更 → Auroraの自動設定を防ぎ、MySQLとの設定に合わせるため performance_schema=ONに変更 → MySQL5.7以降では有効になるのが標準的のため back_log=1500に変更 → sysbencnに同時接続数に耐えるため max_prepared_stmt_countに変更 → sysbencnが発行する大量の prepared_statement

amari3 2019/05/08

リンク

さくらの専用サーバでベンチマークを実施してみた～手順編～ | さくらのナレッジ

はじめにこんにちは、株式会社スマートスタイルの中野です。この記事は、以前投稿した『さくらの専用サーバでベンチマークを実施してみた～スコア編～』で実施したベンチマークの手順や注意点を紹介するものです。今後、MySQLのベンチマーク試験を実施しようと思っている方の参考になれば幸いです。試験全体の流れ前回の記事にも記載しましたが、今回のベンチマーク試験は以下のような流れで実施しています。 Flashストレージのマウント、カーネル設定の変更（専用サーバのみ） DBサーバに MySQL5.7.18 と Percona XtraBackup2.4.8 をインストール計測サーバに Sysbench 1.0 をインストール Sysbenchのデータロード実行 XtraBackupで全体バックアップを取得ベンチマーク用のmy.cnfを設定 Sysbenchのベンチマークを実行 MySQLを

amari3 2019/05/08

リンク

データベースやCPU、ファイルシステムなどへのベンチマークツール、sysbenchをMySQLで試す - CLOVER🍀

これは、なにをしたくて書いたもの？ MySQLに、単純でもいいので簡単に負荷をかけられるツールを探していた sysbenchというものがあるらしいというわけで、sysbenchを使ってMySQLに負荷…というかベンチマークを取ってみる、ということで。 sysbenchとは？こちらのツールです。 GitHub - akopytov/sysbench: Scripta ble database and system performance benchmark Luaを使った、ベンチマークツールです。データベースへの負荷をかけるのに、よく使われるようです。以下のようなベンチマークを実行することができます。 oltp_*.lua … OLTPデータベースのようなベンチマーク fileio … ファイルシステムに対するベンチマーク cpu … シンプルなCPUに対するベンチマーク memory

amari3 2019/04/08

リンク

Webアプリケーションのベンチマークをとるときに気をつけている10のこと - たごもりすメモ

10もないかも、と思いながら項目を書き出してみたら10以上余裕であってキリがないので10で収めた。いやあ、あるなあ。仕事柄よくベンチマークを実行したりしてて色々と思うところが溜まっていたところ、以下のような記事を見掛けたのでなんか書こうと思った。ところでこの記事はベンチマークを実行するための準備作業がループを回して2時間かかるところの待ち時間に書かれている。 sfujiwara.hatena blog.com ISUCONといえば多少縁があるコンテストで、文中でISUCON5のことについても言及されているので、それも含めて。自分が業務でいじっているのは "Webアプリケーション" というとちょっと違うんじゃないのというものばかりだが、いやー、最近なんでもHTTPで外部APIを作るからベンチマークのコツとしては大体変わんなかったりするよね。なおこの記事でベンチマークはどのようなものかとか

amari3 2018/10/27

リンク

MySQLメインの人がPostgreSQLのベンチマークをしてみた話

第2回 MySQL・PostgreSQLユーザグループ(MyNA・JPUG) 合同DB勉強会で使用したスライドと追加が含まれていますRead less

amari3 2016/02/26

リンク

Webサーバのベンチマークツールはh2loadが便利 - 人間とウェブの未来

Webサーバのベンチマークをとるのが趣味になりつつあるmatsumotoryです。 Webサーバのベンチマークについては、abからはじまりwrk等を使っていたのですが、最近ではほぼh2loadを使っています。 h2loadはnghttp2というHTTP/2ライブラリのアプリケーションに含まれているツールですが、 HTTP/2（SPDYも）とHTTP/1.xに両対応しているベンチマーク側の同時スレッド数を増やせる TLS及びSNIもサポートしている最小、最大、平均、標準偏差あたりもちゃんとでるので、色々プロトコルを変えつつ同じベンチマークツールで、値の目安を出すにはとても重宝しています。 Nghttp2: HTTP/2 C Library - nghttp2.org 実行結果のサンプルは例えば以下、 $ h2load -c 100 -n 10000 https://localhost:

amari3 2016/01/14

リンク

benchart - ベンチマークを記録、表示するプログラムを書いた

速度重要なプログラムを書いていると、継続的にベンチマークを記録し、いつでも参照可能にしておくことは重要。だけど、そのためにExcelを起動するのは面倒だし、だいたい、ベンチマークを測定するためのコマンドを覚えていられないので、benchartというコマンドを作った。やってくれることは、以下の３つです。ベンチマーク結果を保存ベンチマーク測定に使用したコマンドを保存し、再実行ベンチマーク結果をグラフにして表示以下、使用イメージ。たとえば、qrintfのベンチマークを取ることを考えてみると、examples/ipv4addr.cをコンパイルして実行し、time(1)の値を記録したい。 $ bin/qrintf gcc -O2 examples/ipv4addr.c && time ./a.out 1234567890 result: 73.150.2.210 real 0m0.176

amari3 2015/05/19

benchmark

リンク

DMM inside

日本アニメ初の快挙！海外アニメ賞を受賞した『スキップとローファー』海外ライセンス部長&プロデューサーが語る、奮闘の舞台裏

amari3 2013/09/02

benchmark

リンク

Webサイト負荷テストツール記事まとめ要約

急ですが、webサービスやwebサイトの負荷テストは行っていますか?どの程度のアクセスがあった場合にサーバが遅くなってしまうのかをバズる前に検証しておくべきです。現在、Yahoo、はてブ以外にもGunosy等に載る事で簡単にバズり(普段のPV数＋想定PV数5000〜30000)その時にサーバが同時アクセスに耐えられなくなり、かなりの機会損失を被ってしまいます。自分のサーバ、または借りているレンタルサーバの能力値を理解していればそれなりの対策が打てるようになるのかなーっと。そうゆう事で負荷テストをオススメします。今回は記事を書くというよりは負荷テストが出来るwebサービス、ツール、ソフトを紹介している記事をまとめて紹介して最後に要約していきたいと思います。負荷テストツールをまとめている記事ベスト3 負荷テストを出来るサービスやツールを紹介しているまとめ記事を厳選して紹介したいと思い

amari3 2013/06/18

リンク

abコマンドのベンチマークパターンを書けるab-mrubyを作った

人間とウェブの未来（旧）「ウェブの歴史は人類の歴史の繰り返し」という観点から色々勉強しています。2014年までの人間とウェブの未来の旧ブログです。 Web屋さんはみんな大好きabコマンドは便利ですが、オプションは複雑で数も多く、複数のホストにそれぞれに対応するオプションを指定してテストしたりすると結構カオスになりがちです。最近では、httperfやweighttp等のabに変わる次のHTTPベンチマークツールが出てきていますが、やっぱりまだまだ現役で良く使うのはabコマンドだと思います。そこで、今回はabコマンドの複数のベンチマークオプションのパターンを1つのRubyスクリプトに定義しておいて、それをabコマンドで読み込む事で動的に任意のパターンでベンチマークを行うab-mrubyを作りました。外出しで書いたRubyスクリプトとabコマンドの連携は、ab-mrubyと見てわかるように

amari3 2013/06/06

リンク

SpotInstanceとJMeterを使って400万req/minの負荷試験を行う | DevelopersIO

Apache JMeterのMaster/Slave構成シナリオを用いた負荷試験といえばJMeterということで、使ったことがある方も多いかと思います。しかし、ほとんどの方は自分のPCを使ってやっている程度ではないでしょうか。最近は、スマホ連動のシステムが多くなってきていますので、1台のPCから負荷を掛けたとしても大した負荷試験になりません。そこで、今回はJMeterをMaster/Slaveのクラスター構成にしてドカーンと同時アクセスを行いたいと思います。クラスメソッドの負荷試験の歴史創業時から業務系のシステム開発が多かったことから、レスポンスは3秒以内でOKとか、ピーク時の同時ユーザは100名といった、緩い条件をクリアすれば良かったことが懐かしく思います。今は、ユーザ数・データ量・トランザクション数・トラフィック等が爆発的に増える可能性のあるプロジェクトも多く、負荷試験は必須項目

amari3 2013/05/07

リンク

[perl] Perlで同じコードを違うバージョンのモジュールでベンチマークする - 酒日記はてな支店

複数バージョンのモジュールで同じコードを実行してBenchmark.pmで計測したい、というケースにこう書けばいいかな、という例。普通にBenchmark.pmを使ってしまうと同一モジュールを違うバージョンで複数読み込むことができないため、バージョンごとに子プロセスを fork 子プロセスで use lib して @INC を追加してから use 計測した結果をファイルに保存して親プロセスで集約、表示という流れで書きます。 use strict; use Benchmark qw/ :all /; use File::Temp qw/ tempfile /; use Storable qw/ nstore retrieve /; # 計測したいコード my $code = sub { my $c = Cache::Redis->new; for ( 1 .. 10 ) { $c->s

amari3 2013/04/02

リンク

Starman vs. uWSGI: PSGI server performance comparison | bitrate

This benchmark is about Perl PSGI web application servers but the story starts with Python. I needed to deploy a Python based web application on a server running�nginx. I was not fully up to date about the current WSGI application server offerings and therefore searched for some comparisons. I found a comprehensive WSGI server benchmark�by Nicholas Pi�l�which was very interesting, although slightl

amari3 2012/07/31

リンク

JSにコンパイルされたDartがPerlより速い件 - Islands in the byte stream (legacy)

Dartのインストールが簡単になっていたので試してみたところ、Perlよりも高速だった。なにこれ悔しい。 Dart: void main() { final t = new Stopwatch(); t.start(); final a = new List<int>(); for(var i = 0; i < 1000000; ++i) { a.add(i); } for(var i = 0; i < a.length; ++i) { ++a[i]; } var sum = 0; for(var i = 0; i < a.length; ++i) { sum += a[i]; } print(sum); print(t.elapsedMilliseconds / 1000); } Perl: use 5.12.0; use Time::HiRes qw(gettimeofday tv_

amari3 2012/02/26

リンク

Parallel::Benchmark というモジュールを書きました - 酒日記はてな支店

プロセスを並列に立ち上げて負荷を掛けるようなベンチマークを実行することって、よくありますよね。(例 : クエリキャッシュを切ったほうがいイカ？ベンチマークしてみた - 酒日記はてな支店) Perl で Parallel::ForkManager を使うとそういう処理も簡単に書けて便利なのですが、何度も同じようなコードを書くうちに、これもうちょっと抽象化したら使いやすいかも、と思って Parallel::Benchmark というモジュールを書いてみました。リポジトリはこちらです。 https://github.com/fujiwara/p5-Parallel-Benchmark たとえばフィボナッチ数 fib(10) を求めるベンチマーク。 use Parallel::Benchmark; sub fib { my $n = shift; return $n if $n == 0 o