スタディサプリENGLISHの基盤をECSからEKSに移行しました | PSYENCE:MEDIA
こんにちは、スタディサプリ ENGLISH SREグループの大島です。 オンライン英語学習サービスであるスタディサプリ ENGLISHは2015年10月のリリース1)当時は英語サプリという名前でリリースしていましたから5年が経ち、おかげさまでサービスを拡充させることができています。リリース当初からインフラにはコンテナを採用し、長い間AWSのコンテナオーケストレーションサービスのAmazon Elastic Container Service（以下、ECS）で運用してきましたが、この度ECSからAmazon Elastic Kubernetes Service（以下、EKS）に移行しました。 今回の記事では、その歴史の変遷となぜEKSにしたのかというところを書いていきたいと思います。 コンテナと歩んできた5年間 まず、ECSからEKSに移行しようと思ったきっかけの前に、インフラの歴史を少し振
kubernetes使いは全員 stern を導入すべき
まぁこれは基本的に膨大なログを見ている時に、ピンポイントで絞り込み検索をするという行動を前提としてるからだと思うんだけど、デバッグとかしてるときは「スゴク、コレジャナイ感…」がするわけです。 なので、そんな時はもう素直にkubectl get podsして、kubectl logs -f …. している自分がいました。 まぁこれでも充分なんです。充分なんですけど、辛い事が二つあって。 まず複数のコンテナにロードバランスされるペイロードに関しては自分が見てるコンテナにアクセスが来るとは限らないから全部のコンテナのログを見てるか、自分の見てるコンテナにアクセスが来るまで読み込み続けなければならない。 もうひとつは、開発をしている間の話なので、kubectl applyでdeploymentをガンガン入れ替えているのでコンテナもどんどん世代交代するわけです。そうすると… そう、当然コンテナはデコ
Self-Hosted Cluster から EKS への移行と Platform の Production Readiness - スタディサプリ Product Team Blog
こんにちは。SRE の @chaspy です。 Quipper では AWS 上で Kubernetes Cluster を運用してサービスを提供しています。 これまで kube-aws を用いて Kubernetes Cluster を Self Host してきましたが、このたび Managed Services である Amazon EKS に移行しました。（以下、 Amazon EKS を EKS と表記します） 本記事では、 Kubernetes Cluster の移行で遭遇した問題をどのように解決したかを説明します。また、数多くの Application が稼働している Platform を移行する際にどのような点を考慮するとよいのか、経験を通して学んだことを共有します。 EKS への移行を検討している方はもちろん、Platform Migration に携わる方にとって学びに
Introduction to Kubernetes
この資料は「Kubernetes という名前ぐらいは知っているけど、実際には使ったことがない、何ができるのかよく知らない」という人を対象に、Kubernetes の基本的な使い方を説明しています。 この資料を読めば、Kubernetes 上に単純な Web アプリケーションをデプロイできるようになるはずです。
【KubernetesのAffinity】その１ - Node Affinityの使い方 - Qiita
Affinityとは Affinityとは、Podをスケジューリングの条件を設定する機能である。 以下の3種類があるが、このページではNode Affinityについて説明する。 Node Affinity Pod Affinity Pod Anti-Affinity Pod Affinity、Pod Anti-Affinityについては以下を参照。 【KubernetesのAffinity】その２ - Pod Affinity / Pod Anti-Affinityの使い方 似たような機能でTaint / Tolerationというものもある。 KubernetesのTaint / Tolerationの使い方 目次 Kubernetesハンズオン目次 PodをどのNodeにスケジューリングするのかを設定できる。 NodeSelectorと似ているが、Node Affinityのほうが柔
KubernetesのTaint / Tolerationの使い方 - Qiita
Taint / Tolerationとは Taintとは、PodをNodeへスケジューリングさせないための機能である。 Node Affinityとは逆の機能になる。 TaintsをNodeに設定し、PodにはTolerationsを設定することができる。 これらにはkey, valueなどを設定し、TaintsとTolerationsの条件がマッチした際に、PodはNodeにスケジューリングされるようになる。 それぞれ１つ、または複数のTaints、Tolerationsを設定することができる。 目次 Kubernetesハンズオン目次 Taints Taintsは、以下の３つを使って条件をセットする。 key value effect 例えば、key: app、value: batch、effect: NoScheduleというように、Node、Podにそれぞれ設定する。key, va
Falcoを利用したPod内実行コマンドのログ取得 - Qiita
はじめに Kubernetesの監査ログといえばKubernetes Audit Loggingを利用した、Kubernetes API に対してのリクエストログの事を指します。 しかし、監査ログとして「いつ」「だれが」「何をしたか」を確認するためにはpod内で実行されたコマンドもログとして取得する必要があると感じています。 そこで、今回は kubectl exec 等でpod内で実行されたコマンドをログ取得する方法としてFalcoを検証してみました。 Falcoとは？ Falcoの公式ページにて下記の紹介があります。 Falcoは、アプリケーションの異常なアクティビティを検出するように設計されたビヘイビアアクティビティモニタです。もともとSysdigによって構築されたパワフルなシステムコールキャプチャテクノロジーを使用します。Falcoでは、1組の[ルール]を使用して、コンテナ、アプリケ
Envoy の Trafic Mirroring による負荷テストを考える - ツナワタリマイライフ
弊社には以前 Shadow Proxy というものがいた。 qiita.com 当時のモチベーションとして Database への Index 追加等をぶつけでなく事前にやりたい、ということだった。現状は Production database の Snapshot から Develop database を毎晩リストアしており、事前にそちらで実行するようにしている。 2020年の今やるなら Envoy かな、と。 で、ここでモチベーションとしてあげている負荷テストとは特に、Database の Migration のことを考えている。 現状 EC2 上に MongoDB をセルフホストしている。そのためインスタンスのスケールアップが必要なときにはいろいろあって1日ほどかかる。マネージドサービスの Atlas にすればスケールアップも容易で早くなるし、パフォーマンスに関する分析も提供してく
Viewing Pods and Nodes
Learn how to troubleshoot Kubernetes applications using kubectl get, kubectl describe, kubectl logs and kubectl exec. ObjectivesLearn about Kubernetes Pods.Learn about Kubernetes Nodes.Troubleshoot deployed applications. Kubernetes PodsWhen you created a Deployment in Module 2, Kubernetes created a Pod to host your application instance. A Pod is a Kubernetes abstraction that represents a group of
KustomizeでKubernetes YAMLを管理する
Kubernetes YAMLの壁で述べたようにKubernetesのYAML管理はKubernetesユーザにとって長年の課題だ．コミュニティでは様々なツールが議論されてきた．先日SIG-CLIから登場したkustomizeは将来的にkubectlに統合される前提で開発されている+他のツールと比べても非常に筋が良い（と感じている）．本記事ではkustomizeが登場した背景とKustomizeを使って何ができるのかをまとめる． Declarativeであること Declarative ConfigurationはKubernetesの重要な機能の一つだ．KubernetesユーザはKubernetes APIに対してあるべきDesiredな状態を宣言（Declare）することでKubernetesはその状態になるように動き続ける．例えばユーザが「Podを5つ動かす」という状態を宣言すると
Lens | The Kubernetes IDE
The way the world runs Kubernetes Kubernetes is the OS for the cloud. Thousands of businesses and people develop and operate their Kubernetes on Lens — The largest and most advanced Kubernetes platform in the world.
Docker and Kubernetes: The Complete Guide
If you're tired of spinning your wheels learning how to deploy web applications, this is the course for you. CI+CD Workflows? You will learn it. AWS Deployment? Included. Kubernetes in Production? Of course! This is the ultimate course to learn how to deploy any web application you can possibly dream up. Docker and Kubernetes are the newest tech in the Dev Ops world, and have dramatically chang
Kubernetes 上のアプリケーションから Stackdriver Logging に構造化ログを送る - スタディサプリ Product Team Blog
SRE チームの @yuya-takeyama です。 Quipper の SRE チームでは AWS や Kubernetes を用いたインフラの構築、CI/CD パイプラインの構築・改善等様々な Developer Experience の向上、社内のあらゆるサービスのマイクロサービス化のサポート、そしてそれに伴う複雑化にも耐え得るよう、サービスの安定稼働を支えるためのルール・ツール群を整備しています。 今日はその中でも、簡単かつより精緻に Logs-Based Monitoring が行えるよう、GCP の Stackdrider Logging に構造化ログを送る方法について紹介します。 構造化ログとは ここではとりあえず「Machine-Readable なログ」として定義します。通常のログはテキストベースの Human-Readable なもので、UNIX 哲学においては行指向
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - derailed/k9s: 🐶 Kubernetes CLI To Manage Your Clusters In Style!
Katacoda - Interactive Learning Platform for Software Engineers
Advanced Load Balancing and Sticky Sessions with Ambassador, Envoy and Kubernetes
Microservices 時代の開発環境 / Development env in the microservices age
GitHub - kubernetes-sigs/kind: Kubernetes IN Docker - local clusters for testing Kubernetes
GitHub - kubernetes-up-and-running/kuard: Demo app for Kubernetes Up and Running book
https://argoproj.github.io/argo-cd/