NEG とは何か
はじめにNEG (Network Endpoint Group) というと Container-native Load Balancing の文脈で話されることが多く、パフォーマンスを向上させるためのものという認識が強いと思います。もちろん結果としてパフォーマンス向上が見込まれる場面もあると思いますが、それと同じく個人的に重要だと思うのが、NEG には Kubernetes の世界とその外のプラットフォーム (GCP) を繋ぐ大事な役割があるという点です。 本記事では NEG とは何か、なぜ重要なのかというのを一から説明したいと思います。 尚、NEG には大きく分けて Zonal NEG と Internet NEG という2種類がありますが、本記事では Zonal NEG に絞って記載します。また Zonal NEG は VM を表すものとしても使えますが、ここでは GKE の文脈に絞っ
ここ数年のKubernetesのステートフルワークロードを振り返る
この記事は、Kubernetes3 Advent Calendarの9日目の記事です。 — この記事では個人的に興味がある、コンテナ上のステートフルワークロードについてトレンドや過去からの変遷をまとめたいと思います。 個人的にここ3,4年はKubernetesを含んだコンテナにおけるデータの取扱をどうするかをメインに活動をしていました。 最初のころはコンテナの世界でステートフル（ストレージ）の話していると「そんなことするのか？」という皆さんの意見がありましたが、ここ1年くらいはデータをどのように管理するのか、ステートフルワークロードをどう取り扱うかが一部界隈で議論されていたように感じます。 この記事では過去・現在・未来についてポエム的な内容で書きます。個人の主観が大きく出ている内容になっていますので、それは違うのでは？というところはぜひフィードバックください。 TL;DRKubernete
Rook: EdgeFS AWS S3/ Edge-X S3 やってみた
この記事は「Rookだらけの Advent Calendar」 2019/12/22分です。Rook EdgeFSについて記事を投稿します。 TL;DRAWSS 3/EdgeX S3 は efscli でサービス作成 →Kubernetes Object 作成ですぐ使用可能に基本的にはEdgeFSの抽象化のおかげで様々なストレージプロトコルを均一的に扱えるAWS S3とEdge-X S3の差はオブジェクトストレージにいくつかの機能を追加しているが使い方まではドキュメントされていない（as of 2019/12/22)EdgeFSでNoSQLという記載はEdge-X S3を指しているようだ デプロイこれまで通り相当簡単です。大きな流れとしては以下のとおりです。 EdgeFS 上でefscliを使い、クラスタ作成、テナント作成、バケット作成、サービス有効化を実施Kubernetes側でCRDを
Rook: EdgeFS 仕組みを理解する編
この記事は「Rookだらけの Advent Calendar」 2019/12/19分です。Rook EdgeFSについて記事を投稿します。 TL;DR まとまった情報はMediumにあります一通りMediumの記事を読むと「EdgeFS完全に理解した」になります。この記事では３つの記事を頑張ってサマライズしました。今までやっていて気になったことを調べました。 はじめにここまでやってきて、ドキュメントに沿ってやるとたしかにEdgeFSクラスタが起動してNFSが使えたり、iSCSIが使えたりという状態にすることができました。 ただ、仕組みとしてはいまいち理解が追いつかない部分があったのも事実です。仕組みを知らなくてもクラスタが構成できて各種ストレージサービスができることは大変素晴らしいのですが、エンジニアとしては納得いきません。 ということで、本日は急遽予定を変更して今まで気になってきたこと
Rook: EdgeFS NFSサービスをデプロイする
この記事は「Rookだらけの Advent Calendar」 2019/12/18分です。Rook EdgeFSについて記事を投稿します。 TL;DR: efscliとNFS CRDで数分でNFSサービスを利用可能に この記事では実際にプロビジョニングするところまでやってみたいと思います。 端的に言うと以下のステップでKubernetesクラスタまたは外部のホストからNFSサービスが利用可能になります。 EdgeFS でサイト・テナントを作成NFSサービスを有効化するクライアントからマウント＆PV化気になるところは４日目：VDEV managementなど事前準備ノードにNFSクライアントを入れておくEdgeFS でクラスタ・テナント・バケットを作る昨日の記事でEdgeFSクラスタをデプロイしたところから始まります。 EdgeFS上にサイトやテナントをつくる には efscliというCL
Rook: EdgeFS をKubernetesへデプロイする
この記事は「Rookだらけの Advent Calendar」 2019/12/17分です。Rook EdgeFSについて記事を投稿します。 TL;DR 事前準備が終わっていれば3分でデプロイ可能事前要件はしっかりみておくOperatorは偉大この記事では実際にプロビジョニングするところまでやってみたいと思います。 端的に言うと以下のコマンドで終了です。 しかし、EdgeFSではクラスタ作成時の事前準備が必要となるためその部分を重点的に今日は書きたいと思います。 $ git clone https://github.com/rook/rook.git $ cd cluster/examples/kubernetes/edgefs $ kubectl create -f operator.yaml $ kubectl create -f cluster.yaml事前準備・今回の環境Rook
Rook: EdgeFS 概要
この記事は「Rookだらけの Advent Calendar」 2019/12/16分です。Rook EdgeFSについて記事を投稿します。 コンテンツとしては以下の7本を予定しています。 2019/12/16: EdgeFS 概要2019/12/17: EdgeFS クラスタデプロイ2019/12/18: EdgeFS NFSサービス2019/12/19: EdgeFS iSCSIサービス2019/12/22: EdgeFS S3/S3X2019/12/23: EdgeFS CSI2019/12/24: EdgeFS ISGW Link本日は１回目「EdgeFS 概要」です。現時点はRook1.1.8がStableですがmasterブランチを使って試していきます。この記事は本家の記事を読み解いてき基本的には本家のニュアンスをそのままにし、わかりにくい箇所には補足を入れています。1日目は概
Goku: Building a scalable and high performant time series database system
By Rui Zhang | Engineer, Storage & Caching Co-authored by Jinghan Xu, Jian Wang & Tian-Ying Chang, Engineers At Pinterest, developers rely on Statsboard to monitor their systems and discover issues. A reliable and efficient monitoring system is very important for development velocity. Historically, we’ve used OpenTSDB to ingest and serve metrics data. However, as Pinterest grows, the number of ser
Hands on Knative — Part 1
I’ve been looking into Knative recently. In this 3-part blog series, I want to explain my learnings and show some hands on examples from the Knative Tutorial that I published on GitHub. What is Knative anyway?Knative is a collection of open source building blocks for serverless containers running on Kubernetes. At this point, you might be wondering: “Kubernetes, serverless, what’s going on?” But,
CloudEventsの紹介、そしてServerlessな世界はこれからどこへ向かうのか
5月の頭に開催されたCloudNativeCon & KubeConにてCloudEventsが発表されました。これはこれからのイベントドリブンなアプリケーション開発を助けるための重要な仕様であり、’サーバーレス’な世界はこれから次のフェーズに突入したといえるでしょう。 CloudEventsのスコープ自体はシンプルです。サーバーレスアプリケーションを開発する上で、イベントをより簡単に処理できるようにするためのメタデータのセットが含まれています。 例えば、AWSのS3にオブジェクトが作成された時のCloudEventは以下のようなJSONで表現されます。 そしてCFCN内で議論が進められており、Google, Microsoft, IBM, VMware, SAP, Oracle, Huawei, Alibaba, Red Hat, Iguazioといった様々なベンダーが参加しています。C
Bare Metal K8s Clustering at Chick-fil-A Scale
At full scale Chick-fil-A will be running Kubernetes at the Edge in each of our 2000 restaurants. That means roughly 6000 devices at the Edge running Kubernetes. One of the biggest challenges associated with this is bare metal clustering on-the-fly, in-restaurant. While most Kubernetes deployments are in the cloud or benefit from skilled technicians that are physically located near their deploymen
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Hadoop: Decade Two, Day Zero*
Apache Kafka with Kubernetes — Provision and Performance
Rook EdgeFS: ISGWでデータを扱う
Rook: EdgeFS CSIを試す
Building a Kubernetes Operator In Python With Zalando’s Kopf
Polymer+Node+K8s = All Kinds of Awesome
Top 10 Java Books for Programmers — All time Great
Event Storming Summit 2018 – Wojtek Ptak – Medium
Kubernetes recipe: Sonatype Nexus 3 as a private docker registry