ローカルRedisでアプリケーションを高速にする（Linux+PHP+DB+Redis） - Qiita
はじめに ローカルRedisを使うと外部DB・キャッシュへの接続回数、通信回数、通信データ量を減らすことができます。 特にオートスケールでWebサーバが増減するシステムに合っていると思います。 Memcachedでも同じことができますが、ランキングやるならばRedisのsorted setだったりするし、ローカルと外部で統一した方がいいかなーということで今回はRedisでやってみました。 以前に投稿した「あるSPソーシャルゲームのチューニングメモ」のキャッシュ処理と高速化についてより細かくまとめたものです。 高速化の話をするとどうしても精神論みたいな話が多くなってしまうので、なるべく具体的なコード例を書いたつもりです。 （でも精神論も大事なので全部読んでほしぃ…） 今回はphpredisを使ってシンプルに書いたので分かりやすくなっているはず！！ Redis使い分けの例 ローカルRedis
Bulk Insert In Redis
Redis で初期データを大量投入する必要があったので、Redis でバルクインサートする方法を調べてみた。 ショートアンサーとしては、Redis 公式サイトの Documentation->Topics->Redis Mass Insertion を読むこと。 読みながら動かした備忘録が以下。 ====== Redis はオンメモリデータベースなので各コマンドの処理時間は 非常に短い。 ボトルネックはネットワークの遅延ということで ping コマンドを1万回実行し、処理完了までの時間を以下の4通りで比較。 コマンド送信のたびにTCP接続を確立 TCP接続の確立を1回に減らす コマンド送信を1回に減らう 2.4.14/2.6で導入された –pipe を使う 1. コマンド送信のたびにtcp接続を確立 まずは、誰もやらないと思うけど、コマンド送信のたびに毎回 TCP 接続を確立する方法 #n
Redis Expire Performance - Maverick's tech blog
Scala書けますで入社した筈なのにnewrelicみながらDBのチューニングばかりしてる、ぽんこつです。 今回はRedisをどうやって叩くと早くなるのかを、主にexpireまわりで適当にベンチしたりした。 私のDBの経験値がMySQLに偏っているのであまり手出ししてこなかった弊社のRedis環境だが、パフォーマンス絡みの問題を聞いたり見かけるようになってきたので、Redisのパフォーマンスを引き出す方法について調査をした。 弊社のサーバアプリケーションは主にScalaで書かれているので、ScalaからRedisに繋いだときのベンチマークが中心になる。 JMH JMHはマイクロベンチマークツールの一種。JVMはJITによって、何度も同じ箇所を実行すると、徐々にコードを最適化して早く動くようになる、等々の要素を排除し、できるだけ正しいベンチマークをすることができるツール。 ScalaでJMH
Coffee Meets Bagel が、Amazon ElastiCache for Redis を使用してリコメンデーションモデルを強化 | Amazon Web Services
Amazon Web Services ブログ Coffee Meets Bagel が、Amazon ElastiCache for Redis を使用してリコメンデーションモデルを強化 Coffee Meets Bagel (CMB) は、毎日 150 万人以上のユーザーに出会いの機会を提供するマッチングアプリです。有意義な関係をもたらす、楽しく安全で質の高い出会いの経験をもたらすことに焦点を当てているため、当社のモットーは「量よりも質」です。こうした約束を果たすために、私たちが提供するすべてのマッチングは、ユーザーが求める厳格な基準を満たす必要があります。 ところが、現在のトラフィックでは、高品質のマッチングを作成することは困難な問題となっています。当社は 30 人のエンジニアで構成されています (データチームには 3 人のエンジニアしかいません)。 これは、すべてのエンジニアが当社
Redisについて各データ型と想定用途をまとめてみた | 丸ノ内テックブログ
フロントエンド front end バックエンド back end アプリ開発 app インフラ infra その他 other データドリブン data driven タグ一覧 Ajax（1） Android（20） Apache（2） AR（2） benchmark（1） BigQuery（2） browsersync（1） C4（1） CakePHP（1） CentOS7（1） CI（1） CMS（3） CoreNFC（1） CraftAR（1） CSS（1） DeepLab（2） Dmitry Stogov（1） ECMAScript（1） ECMAScript6（1） ElePHPant（1） Facebook（3） FFmpeg（1） firebase（1） fluentd（1） Framework（1） GD（2） gif（2） Git（1） GLSL（5） Google A
Redisのビットコマンドを用いた高速集計 - アルパカDiary Pro
Redisは様々な型をもっているので 単純な集計(increment)は結構柔軟にできたりします。 ですが、後から条件付きでクロス集計したい時があると思います。 Redisにはビット演算するコマンドがあるので それを使っていろいろな集計をしてみました。 ビット関連コマンドリファレンス GETBIT/SETBIT Redis 2.2.0以降が必要。 ビットのオフセットに対してフラグを取得／設定します。 GETBIT key offset SETBIT key offset value(1/0) BITCOUNT Redis 2.6.0以降が必要。 キーに対するビットカウントを取得します。 BITCOUNT key [start] [end] BITOP Redis 2.6.0以降が必要。 複数のキーに対してビット操作を行うことが出来ます。 集計にはこの操作を使います。 BITOP opera
設定ファイル — redis 2.0.3 documentation
起動モード設定¶ daemonize(yes/no)¶ デフォルトではRedisは通常のプログラムとして動作します。必要に応じて 'yes' を設定してください。デーモンとして動作する場合は、Redisはpidを /var/run/redis.pid に書き込みます。
Redisの特徴と活用方法について
30. 30 ・ノードに0-16384の数字(slot)を割り振る。 ・リクエストのキーを計算して、対象のサーバを判別する。 [HASH_SLOT = CRC16(key) mod 16384] クラスタリングの概要 [slot 0-5460] [slot 5461-10922] [slot 10923-16383] ①サーバを選んで命令 ②対象のサーバを判別して命令を転送 node1 node2 node3③命令を実行して結果を返す
3分でRedisのpub/subを使ってみる【redis】 - DRYな備忘録
pub/sub オンメモリのKVSでありながら、なおかつディスクに永続化する機能も持つRedisですが、あるクライアントプロセスから別のクライアントプロセスへ通知を送る、いわゆる「pub/sub」も提供しています。 「pub/sub」とは「publish」と「subscribe」の略で、日本語訳するなら「発行」と「購読」。あるチャンネルに誰かがイベントを「発行」すると、そのチャンネルを「購読」している人すべてにそのイベントが通知される、といった意味。 ゴール 3分でredisのpub/subを体験してみる redisのインストールなどは MacにRedisをインストールしてことはじめ【redis】【MacOS】 - DRYな備忘録をご参考。 登場人物 redisサーバプロセス redisクライアントプロセス その1 redisクライアントプロセス その2 で、クライアントその1がSUBSC
AWSで動かすクラウドネイティブなWebSocketアプリケーションを考えてみる - Qiita
はじめに クラウドネイティブという言葉が流行っていますね。昨日は@chiyoppy がMicroservisesとクラウドについての記事を書いてくれました。クラウドでWebサービスを設計する上で大切な事が簡潔にまとまった良い記事だと思います。今回はそれを受けて、クラウドネイティブなWebSocketアプリケーションをどのように作っていくかを考えて書こうと思います。昨日の記事ではアプリケーションについて、HTTPはステートレスだからすごい！スケールできる！みたいな事が書かれていましたが、今回の記事ではHTTPよりスケールしにくいと思われるWebSocketのアプリケーションについて考えてみます。 ちなみに僕は２０１５新卒で、仕事ではSwiftを使ってiOSアプリを書いてます。 それと今日誕生日です。プレゼントお待ちしています。 また僕は業務ではSwiftでiOSアプリを書いている事もあり、こ
Mojolicious+redisでチャットを作った
11. 同期なコード package Test::Web::Example; use Mojo::Base 'Mojolicious::Controller'; use Time::HiRes qw(sleep); sub welcome { my $self = shift; sleep(0.5); $self->render( message => 'Welcome to the Mojolicious real-time web framework!'); } 1; 12. 非同期なコード package Test::Web::Example; use Mojo::Base 'Mojolicious::Controller'; use Time::HiRes qw(sleep); sub welcome { my $self = shift; $self->render_later;
Hubot でアンケート機能 hachipi を実装した話 - Qiita
はじめに 忘年会シーズンに突入し Slack であれこれ皆の意見を聞きたい場面がチラチラあるので、アンケートできる機能を実装しました この機能でできること アンケート追加機能 質問する機能です。長々と説明してもわからないと思うので見てみましょう。 コマンドは hubot hahcipi add ${key_name} ${title} です アンケート回答機能 回答できます。同様に見てみましょう コマンドは hubot hachipi answer ${key_name} ${answer} です key_name みすった。。。 アンケート回答確認機能 回答した結果を確認できます コマンドは hubot hachipi show ${key_name} です 今度はコマンドみすった。。。 実装について 今回は redis を使って質問内容と回答内容を管理しています 質問とか回答内容のデー
Snapchatを支える技術：768台のRedisをGoogleクラウドで構築 #gcpja - Qiita
GoogleのSVP、Urs Hoelzleが「いま世界でもっとも人気のあるスマートフォンアプリ」と評し、Facebookによる3000億円の買収提案をスルーしたとされるSnapchat。その共同設立者でCTOのBobby Murphyが、3/25に開催されたGoogle Cloud Platform Liveに登場し、“Snapchatを支える技術”としてのGoogle Cloud Platform (GCP)の使い所や開発体制をかなり具体的に説明していたので、補足と解説を交えながらざっと意訳してみた。 SnapchatのCTO, Bobby Murphyと、GoogleのSVP, Urs Hoelzle From Google Cloud Platform Live SnapchatがGoogle App Engineを選んだ理由 "それまでいくつかの小さなプロジェクトでGoogle
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
How to Use Elasticsearch, Logstash, and Kibana to Manage Redis Logs | Qbox HES
ベンチマーク MySQL Memcachedプラグイン vs Memcached vs Redis | スマートスタイル TECH BLOG