[B! redis] Konboiのブックマーク

RedisサーバのCPU負荷対策パターン - ゆううきブログ

Redisは多彩なデータ構造をもつ1インメモリDBであり、昨今のWebアプリケーションのデータストアの一つとして、広く利用されている。しかし、一方で、性能改善のための手法を体系的にまとめた資料が見当たらないと感じていた。実際、最初にCPU負荷が問題になったときにどうしたものかと悩み、調査と試行錯誤を繰り返した。そこで、この記事では、自分の経験を基に、RedisサーバのCPU負荷対策を「CPU負荷削減」「スケールアップ」「スケールアウト」に分類し、パターンとしてまとめる。背景 RedisのCPU負荷対策パターン CPU負荷削減 multiコマンド Redisパイプライニング Luaスクリプティング Redisモジュール(夢) スケールアップスケールアウト参照用スレーブ垂直分割水平分割 Redis Clusterによる水平分割その他スライド資料あとがき参考資料背景 R

Konboi 2017/09/13

リンク

RedisのSorted Setsで簡易的な遅延実行Queueを作って迅速にLINE LIVEのPC配信対応をリリースした話 - LINE ENGINEERING

! This post is also available in the following languages. 英語, 韓国語みなさんこんにちは、LINE LIVE開発のYappoです。今回は先日リリースされました一般向けのPC配信機能を実装するときに作った簡易的な遅延実行Queueについて書いていこうと思います。関連エントリ：LIVE PRESS 公式ブログ – ゲーム実況にもぴったり！LINE LIVEでPC横型ライブ配信を試してみよう背景今までのLINE LIVEでの配信方法としては、アプリ上で直接配信する方法と、公式アカウント向けの専用画面(LINE OFFICIAL ACCOUNT MANAGER)とRTMPソフト(もしくは専用機材)を利用してPCからの配信する方法がありました。この2つの方法は全く違う仕組みで実装されるように見えますが、実は基本となる設計は同じで

Konboi 2017/06/22

redis
queue

リンク

Amazon ElastiCache for Redisアップデート – Sharded Clusterの追加やエンジンバージョンを更新 – | Amazon Web Services

Amazon Web Services ブログ Amazon ElastiCache for Redisアップデート – Sharded Clusterの追加やエンジンバージョンを更新 – 多くのAWSのお客様に高速で、インメモリデータストアとして Amazon ElastiCacheをご利用頂いています。 2013年にAmazon ElastiCache for Redisをリリースし、スナップショットのS3へのエクスポート機能、エンジンバージョンの更新、スケールアップ機能、タグ、Multi-AZで自動フェイルオーバー機能を数年で追加してきました。本日、新機能をElastiCache for Redisへ追加しました。詳細は以下の通りです。 Sharded Clusterサポート – 3.5 TiB以上をインメモリデータとして扱う事が出来るsharded clusterを作成可能になり

Konboi 2016/10/17

リンク

chrone's external storage

Redis 2.8 の redis-sentinel によるレプリケーションの自動フェイルオーバーについて、比較的発生しそうな障害を想定して動作検証してみました。結論から redis-server の自動再起動を構成している場合は要注意。 daemontools とか。 Master が落ちた後すぐ(例えば数秒)に再起動してきた場合、再び Master としてレプリケーションに参加します。よって、Master 再起動の前後でデータに差異があった場合でも、再起動後のデータをもとに同期される為、データが破壊される可能性があります。これを回避する為には、Sentinel により sdown/odown として認識されるのを待ってからインスタンスを復帰させるようにします。復帰が早すぎると、障害(sdown/odown)ではなく再起動(reboot)と認識します。レプリケーションの再