いまさらGoでElasticache Redisの負荷・障害試験をがっつりしてみた
こんにちは、 株式会社アプリボット、バックエンドエンジニアの小川詩織です。 今回はgolangで開発中の新規プロジェクトのため、ElasticacheRedisに関する検証を行いました。 かなり長くなってしまいましたが、参考にしていただければ幸いです。 以下、検証内容になります。 まえおき 検証のための実装にはgolangを用い、 go-redisによるElasticache Redisについての検証になります。 また、ゲームで良く活用される Ranking機能 の実装を想定した検証を行いました。 Ranking機能実装のためにRedisは ソート済みセット型 を用います。 Ranking機能についての想定なので、同一ランキングはkeyも同一になり、 Shardを増やしても負荷分散できないため全て Shard=1 として検証を行います。 また、Redisの 要素数は1000万件 用意しまし
Elasticache Redisのバージョンアップ時にノードはどう入れ替わる? | DevelopersIO
クラスターを組んでいない Elasticache Redisの場合 バージョンアップの流れ バージョンアップを実行 全ノードの CacheClusterStatus が modifying になる レプリカノードが順次バージョンアップされる 全レプリカノードのバージョンアップが完了 レプリカノードがプライマリに昇格し、プライマリエンドポイントはその新ノードのIPアドレスを返す 旧プライマリノードがバージョンアップされる 全ノードの CacheClusterStatus が available になる Redis インスタンスの作成 クラスターモードを無効 Multi-AZ with Auto-Failover を有効 レプリカ数を1 Redis バージョンを 4.0.10 で作成します。 エンドポイント 非クラスターモードでは、書き込みはプライマリノード1台に対してのみ可能です。 このノー
ElastiCache + Redis に出てくる概念と、クラスタモードごとの違い - nyamadoriの日記
はじめに Web サイト表示速度向上の一環として、仕事で、ElastiCache + Redis によるキャッシュ層を導入する。 導入にあたり、ElastiCache + Redis で利用するノードタイプ（インスタンスタイプ）や、制限などの事前調査が必要になった。 ElastiCache + Redis は、ノードタイプやクラスタの種類によって、機能サポートが異なり、混乱するところが多々あったため、AWS のドキュメントを参考に、分かりにくいところをまとめた。 これから導入する段階なので、AWS のドキュメントの内容以上のことは書いていません。 運用についてとか、ハマったところなどの記述はありません。 内容におかしいところがあれば教えてください 概念 実際に使うかどうかに関わらず、シャードやレプリカという用語がバンバンでてくるので、まとめる。 参考: http://docs.aws.am
AWS Lambda、Amazon Route 53、および Amazon SNS を使用して、Redis クラスター用 Amazon ElastiCache (クラスターモードが無効) のリードレプリカエンドポイントを監視します | Amazon Web Services
Amazon Web Services ブログ AWS Lambda、Amazon Route 53、および Amazon SNS を使用して、Redis クラスター用 Amazon ElastiCache (クラスターモードが無効) のリードレプリカエンドポイントを監視します Redis 用 Amazon ElastiCache では、アプリケーションが指定されたエンドポイントを使用して ElastiCache ノードまたはクラスタに接続します。Redis 用 ElastiCache ユーザーガイドのRedis 用 ElastiCache コンポーネントと機能によると、複数のノードを持つ Redis (クラスターモード無効) クラスターには次の 2 種類のエンドポイントがあります。 「プライマリエンドポイントは、プライマリロール内の特定のノードが変更された場合でも、常にクラスタ内のプ
Amazon ElastiCache (Redis OSS) とは - Amazon ElastiCache (Redis OSS)
Amazon ElastiCache は、Redis OSS エンジンと Memcached エンジンの両方で動作します。関心のあるエンジンのガイドを使用してください。必要なエンジンがわからない場合は、このガイドの「Memcached と Redis OSS の独自設計型キャッシュの比較」を参照してください。 サーバーレスキャッシュ ElastiCache (Redis OSS) はサーバーレスキャッシュを提供するため、アプリケーションの Redis ベースのキャッシュの追加と操作が簡素化されます。 ElastiCache （Redis OSS) Serverless を使用すると、可用性の高いキャッシュを 1 分以内に作成でき、インスタンスのプロビジョニングやノードやクラスターの設定が不要になります。デベロッパーは、 ElastiCache コンソール、SDK、または CLI を使用して
Amazon ElastiCache (Redis)のMulti-AZを構成する | DevelopersIO
2014/10/28更新 : プライマリノードの切り替えについて追記しました。 ども、大瀧です。 本日、AWSのキャッシュサーバー as a ServiceのElastiCache(Redis)にMulti-AZ機能がリリースされました。早速試してみたので、レポートしてます！ Multi-AZ機能とは Multi-AZ機能とは、Amazon RDSで提供されている、AWSのデータセンターであるアベイラビリティゾーン(AZ)レベルの障害に対応する可用性機能です。 ElastiCache(Redis)では、従来から複数AZへのキャッシュノードの配置とノード間レプリケーションがサポートされていましたが、プライマリーノードのフェイルオーバーが手動でした。キャッシュノードの障害検知とプライマリーノードの自動フェイルオーバーが今回のアップデートで追加されたと考えると良いでしょう。 RDSのMulti-
What is Amazon ElastiCache (Redis OSS)? - Amazon ElastiCache (Redis OSS)
Welcome to the Amazon ElastiCache (Redis OSS) User Guide. Amazon ElastiCache is a web service that makes it easy to set up, manage, and scale a distributed in-memory data store or cache environment in the cloud. It provides a high-performance, scalable, and cost-effective caching solution. At the same time, it helps remove the complexity associated with deploying and managing a distributed cache e
cloudpackブログ - ElastiCacheのConfiguration Endpointの実体
ElastiCacheのCache Clusterを作成すると、下記のようにConfiguration Endpointが利用できます。 このConfiguration Endpointを名前解決してみると下記のようになりました。 # dig +noall +answer test.xxxxxx.cfg.apne1.cache.amazonaws.com test.xxxxxx.cfg.apne1.cache.amazonaws.com. 60 IN CNAME ec2-xxx-xxx-xxx-xxx.ap-northeast-1.compute.amazonaws.com. ec2-54-249-151-184.ap-northeast-1.compute.amazonaws.com. 60 IN A yyy.yyy.15.105 実はこのIPアドレスは、下記のようなCache Node
インメモリKVS「Redis」を試してみる -導入編- | ビズリーチラボ
初めまして。昨年12月入社の芹沢です。エンジニアとしてはまだまだ未熟者ですが、よろしくお願いします。 今回は私の個人的趣味で、キーバリューストアの『Redis』を試してみたいと思います。今回は導入編です。 1.Redisってなーに？ Redisはキーバリューストア型のデータキャッシュサーバです。memcachedとかと同じ系統のキャッシュサーバに該当します。 オープンソースで開発されておりBSDライセンスでリリースされています。 詳細はこちらに日本語ドキュメントがあります。 2.主な特徴 キャッシュサーバというとmemcachedがかなり有名ですが、memcachedとの違いという観点で特徴を紹介します。 1.データがハードディスクにも保存される memcachedの場合、データは全てメモリ上に保存され出し入れされます。 そのお陰でハードディスクを使用するRDBよりも高速な処理を可能
Amazon ElastiCacheってなんじゃ？
Amazon ElastiCacheというあたらしいサービスがbeta公開されました。 これはいわゆるAmazonが提供するmemcacheサーバーで、サーバークラスタとして動作し、EC2のネットワーク上からアクセスが可能です。 今回は、簡単にElastiCacheを試してみます。 まず、ElastiCacheのページにアクセスし、右ペインにある"Sign Up Now"のボタンからElastiCacheの利用登録をします。 すると、AWSのコンソールで"ElastiCache"のタブが追加されるので、選択します。 左ペインを見ると、このサービスがまだUS-Eastでしか提供されていないことがわかります。 また、メニューツリーに、いくつか機能がならんでいるのがわかります。 まず、その中から"Cache Security Groups"を選択して、"Create Cache Security
Amazon ElastiCache編～ElastiCacheを使ってみよう！パート①～
こんにちは！Rookieです。 前回までのレシピでは「Amazon Glacier編」と題してお話していたかと思いますが、今回からのレシピでは「Amazon ElastiCache編」ということでAmazon ElastiCacheの設定と接続方法について2回にわたって簡単に説明します。 その前に、Amazon ElastiCacheに関する情報をご紹介しましょう！ 先日、今回のレシピで記述するAmazon ElastiCacheにオートディスカバリ機能が追加されたと、AWSより発表がありました。 後ほど詳細に説明しますが、Amazon ElastiCacheを使用するにはキャッシュクラスタを立ちあげる必要があります。 このキャッシュクラスタは、ノード(Amazon EC2のインスタンスタイプのようなもの)等を設定することで構成されるのですが、今までだとそのノードを変更したいとなった場合ノ
AWS News Blog
AWS Week in Review – AWS Documentation Updates, Amazon EventBridge is Faster, and More – May 22, 2023 Here are your AWS updates from the previous 7 days. Last week I was in Turin, Italy for CloudConf, a conference I’ve had the pleasure to participate in for the last 10 years. AWS Hero Anahit Pogosova was also there sharing a few serverless tips in front of a full house. Here’s a picture I […] Amaz
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
AWS Black Belt Online Seminar 2017 Amazon ElastiCache
SSSSLIDE
[AWSマイスターシリーズ] Amazon ElastiCache![[AWSマイスターシリーズ] Amazon ElastiCache](https://cdn-ak-scissors.b.st-hatena.com/image/square/094c95a689b87b1c771a694b4a7d316a340e9c5d/height=288;version=1;width=512/https%3A%2F%2Fcdn.slidesharecdn.com%2Fss_thumbnails%2F20131030aws-meister-regenerate-elasticache-131101003447-phpapp02-thumbnail.jpg%3Fwidth%3D640%26height%3D640%26fit%3Dbounds)
What is Amazon ElastiCache (Redis OSS)? - Amazon ElastiCache (Redis OSS)
Redis on EC2
SSSSLIDE
20120117 13 meister-elasti_cache-public
awssummit2013_ソーシャルゲームにおけるバンダイナムコゲームスの適応力