[B! Redis] lamichのブックマーク

RedisサーバのCPU負荷対策パターン - ゆううきブログ

Redisは多彩なデータ構造をもつ1インメモリDBであり、昨今のWebアプリケーションのデータストアの一つとして、広く利用されている。しかし、一方で、性能改善のための手法を体系的にまとめた資料が見当たらないと感じていた。実際、最初にCPU負荷が問題になったときにどうしたものかと悩み、調査と試行錯誤を繰り返した。そこで、この記事では、自分の経験を基に、RedisサーバのCPU負荷対策を「CPU負荷削減」「スケールアップ」「スケールアウト」に分類し、パターンとしてまとめる。背景 RedisのCPU負荷対策パターン CPU負荷削減 multiコマンド Redisパイプライニング Luaスクリプティング Redisモジュール(夢) スケールアップスケールアウト参照用スレーブ垂直分割水平分割 Redis Clusterによる水平分割その他スライド資料あとがき参考資料背景 R

lamich 2023/02/27

水平分割の話が出てきてる時点でRedisがいかにスケールしないかということがわかる

リンク

Redis 用 Amazon ElastiCache（キャッシュ管理・操作）| AWS

クラウド向けに構築された Redis 互換のインメモリデータストア。ミリ秒未満のレイテンシーを実現し、リアルタイムアプリケーションを強化。 Amazon ElastiCache for Redis は、ミリ秒未満のレイテンシーを実現する非常に高速なインメモリデータストアで、インターネット規模のリアルタイムアプリケーションを強化できます。Redis 用 ElastiCache は、オープンソース Redis 上に構築されており、Redis API との互換性を備えています。また、Redis クライアントとの連携が可能で、データの保存にはオープン Redis のデータ形式を使用します。自己管理型の Redis アプリケーションは、コードを変更することなく Redis 用 ElastiCache とシームレスに連携します。ElastiCache for Redis には、スピード、シンプルさ、お

lamich 2018/07/05

リンク

パフォーマンス比較 Cassandra、Mongodb、SQLite、H2、MySQL、Postgres - cypher256's blog

下記のようなシステムでパフォーマンスが良さげな SQLite を使用予定ですが、もっと速いものが無いか確認のため他のデータベースのパフォーマンスを計測してみました。SQL 利用前提ですが、NoSQL が圧倒的な性能を出す場合は検討する必要があるので KVS も確認しました。データ件数は 1 億件程度、JDBC SQL 利用可能 INSERT、UPDATE はバッチ SELECT は主キーアクセス性能を重視将来スケールアウトのための分散はありえるが、スタンドアロンで遅いのはだめデータベースのパフォーマンス比較計測したデータベースデータベース名タイプ形態評判計測についての備考 SQLite RDB 組み込み ※2 おもちゃ、Android標準 JDBC操作 ※1 H2 RDB 組み込み ※2 組み込み最速 JDBC操作 ※1 Derby RDB 組み込み ※2 Java標準で

lamich 2017/10/11

リンク

Redis Sentinelを運用してみたお話 | GMOメディアエンジニアブログ

こんにちは、宇津井です。弊社ではゲソてんというゲームプラットフォームを運営しております。ゲソてんではサービスリリース当初から主にキャッシュ的な役割でRedisを導入していました。つい先日の事ですが訳あってRedis 2.6からサポートされたRedis Sentinelを採用しました。今回は、採用に至った経緯をご紹介します。簡単なシステム構成パフォーマンスは良いし、Memcachedには無い便利な機能を提供するRedisですが約一年間運用していくつかの問題が出てきました。 Redisサーバーが突然高負荷に陥るするとWebサーバーも高負荷に陥るRedisのReplicationは張ってるけどアプリケーション側でRedis Slaveへフェイルオーバーしない（MySQLを直接参照する）Redis落ちると恐らくMySQLサーバーが耐えられない（落ちた事無いけど）という事で対策を行ってきました

lamich 2013/04/24

リンク

GitHub - chrisboulton/php-resque: PHP port of resque (Workers and Queueing)

php-resque: PHP Resque Worker (and Enqueue) Resque is a Redis-backed library for creating background jobs, placing those jobs on one or more queues, and processing them later. Background Resque was pioneered and is developed by the fine folks at GitHub (yes, I am a kiss-ass), and written in Ruby. What you're seeing here is an almost direct port of the Resque worker and enqueue system to PHP. For m

lamich 2012/12/23

リンク

ソーシャルゲームスケールアウトの歴史

lamich 2012/12/23

リンク

Cassandra vs. Redis

This document compares Cassandra and Redis for use as a backend for a Facebook game with 1 million daily users and 10 million total users. Redis was chosen over Cassandra due to its simpler architecture, higher write throughput, and ability to meet the capacity and performance requirements using a single node. The Redis master handled all reads and writes, with a slave for failover. User data was

lamich 2012/06/04

リンク

「バックエンドの経験はなかった」Instagram創業者は、どうやってシステムをスケールさせてきたか

昨日のPinterestの記事「Pinterestの急成長を支えてきたアーキテクチャとは？ Pythonで開発しAmazonクラウドで運用」に続いて、やはり写真を中心としたサービスで急成長してきたInstagramのスケーラビリティについて、まとめてみました。 InstagramもPinterestと同様に、基本はAmazonクラウド上でPythonとフレームワークのDjangoを使ったシステムを構築しています。興味深いのは、創業者の二人ともバックエンドの経験がないなかで試行錯誤をしてシステムをスケールさせてきた点です。 Instagramは先月、Facebookに買収されると発表されています。この先、Instagramのシステムはどう変わっていくのでしょうか。 Instagramのシステム構成約半年前、昨年12月にInstagramのブログに投稿された記事「What Powers In