GCP Cloud RunでLitestreamを利用する
https://zenn.dev/voluntas/scraps/f4939cbe92525c を見て、Cloud Run でもホストできると個人的にはうれしいかもなーと思って実験してみた コツとしては、 第二世代の実行環境 で動作させる コンテナ起動時にrestoreしてGCSからデータをロードするようにする 最大インスタンス数を1にする LitestreamのGCS対応はCloud Runの実行環境のサービスアカウントでは実行されないので、サービスアカウントを作り、SecretManager経由で鍵情報をファイルとしてマウントし、GOOGLE_APPLICATION_CREDENTIALS としてパスで与える。 といったところだった。 litestream replicate -exec が実行している内容を考えると、定期的にGCSへ更新する処理が走るので、Always on CPU
Google Cloud の新たな目標: 4000 万人以上のクラウド人材育成 | Google Cloud 公式ブログ
※この投稿は米国時間 2021 年 10 月 7 日に、Google Cloud blog に投稿されたものの抄訳です。 世界中で、さまざまな業界の企業がビジネスのデジタル トランスフォーメーションの真っ只中にいます。多くの企業にとって、COVID-19（新型コロナウイルス感染症）のパンデミックは事態をさらに加速させました。このようなデジタル トランスフォーメーションは、持続可能性の促進、カーボン ニュートラルの拡大、人工知能による新しいビジネスモデルの構築、これまでにないレベルでの世界規模のバーチャル コラボレーションの実現など、私たちの仕事や生活にすでに影響を与えています。 さらに重要なことに、このような変化の原動力となるのは、大規模なクラウドの導入と維持に必要なスキルを持った人材となるでしょう。特に人工知能、機械学習、データ分析、アプリケーション開発、セキュリティ、クラウド アーキテ
「その言語、 Cloud Run で実装してみない？」というテーマで喋りました #devio2021 | DevelopersIO
DevelopersIO 2021 Decade のビデオセッションにて、Cloud Run について話しました。その動画と関連資料をご紹介します。 こんにちは CX事業本部 MAD事業部 の 田中 孝明 です。 DevelopersIO 2021 Decade という弊社オンラインイベントにて、「その言語、 Cloud Run で実装してみない？」というテーマでお話させていただきましたので、ご紹介します。 セッション概要 MAD事業部では以前から一部使われていた Google Cloud を本格的に利用しようという動きがあります。個人的に好きなサービスである Cloud Run を使った内容をお話しします。 動画 スライド Cloud Run を一言で Cloud Run は 2019年 にデビューした コンピュート に属するサービスです。 主な機能 Cloud Run は、マシンのプロ
GCP の Compute Metadata Credentials について
Google Cloud Platform(以降 GCP) の認証認可については GCP と OAuth2 などの記事があるが、 Compute Metadata credential そのものの解説はあまり十分にされているとは言えないので、今回一つの記事で説明する。 Compute Metadata Credentials と聞いてもピンと来ない人向けに書くと、「Cloud Run や Cloud Functions などの GCP のプロダクトから GCP の API を呼ぶのにサービスアカウントキーが必要ないこと」の裏側がどのように動いているかの話について説明する記事である。 Compute Metadata Credentials とは Compute Metadata Credentials は Google Cloud Platform(以降 GCP) の標準の credent
完全マネージドな k8s ! GKE Autopilot を解説する
Kubernetes / GKE ファンの皆様こんにちわ。Google Cloud の Kazuu (かずー) です。GKE Autopilot が GA になりました。弊社公式ブログに続きまして、GKE Autopilot を日本語で解説していきたいと思います。 本記事は以下、3 部構成となります。 GKE Autopilot 概要GKE Autopilot を試してみるGKE Autopilot がハマりそうなユースケースは？ 1. GKE Autopilot 概要GKE Autopilot は GKE の新しいモードです。Control Plane に加えて、Node が完全マネージドになります。これまでの GKE では Node はユーザー自身が必要台数分作成し、以後の Day 2 オペレーション (e.g. アップグレード) 等も気に掛ける必要がありました。GKE Autopil
4年ほど本番運用してきたGoogle Kubernetes Engine。４年の間で変化し続けてきた弊社のIngress周りの歴史 | Money Forward Kessai TECH BLOG
4年ほど本番運用してきたGoogle Kubernetes Engine。４年の間で変化し続けてきた弊社のIngress周りの歴史 きづけば2021年ですね。12月末に書いたこの記事は年末休暇の関係で、公開がこのタイミングになりました。あけましておめでとうございます。 今回は、マネーフォワードケッサイが利用しているGCP/GKEのIngreeまわりを振り返ってみたいとおもいます。 創業初期 2017年3月時点ではGCPには証明書を自動的に作成する仕組みがなかった事もありますが、まだまだ証明証は信用の為にEVを買うという考えが強かったので、EV証明書とワイルドカード証明書を購入してIngressに設定してました。 証明書の自動作成と更新できるように ユーザが利用するドメインのみ購入した証明書を使い、社内利用のドメインは、cert-managerを利用して作成したLet’s Encriptの証
Google Cloud のアクセス管理をおさらいしよう 2020アップデート版
この記事は Google Cloud Japan Customer Engineer Advent Calendar 2020 の 2日目の記事です。 TL;DR本記事ではGoogle Cloud でのアクセス管理について整理していきます。 はじめにGoogle Cloud Japan Customer Engineer Advent Calendar 2019 で、Google Cloud の IAM をおさらいしよう という記事を書いたのですが、多くの方に読んでいただいたのですが、逆に多くの方が悩まれるトピックなのだなと感じました。2020年も多くのアップデートがありましたので、改めて Google Cloud の アクセス管理をおさらいしていきましょう。 クラウドを使う上で、ユーザー管理や権限管理は非常に重要です。Google Cloud を使う際に、どのようにユーザー管理できるのか
Google Cloud Storage にmp4ファイルがアップロードされたら Cloud Functions でHLS形式に変換する
指定 bucket の google.storage.object.finalize をトリガにしてmp4ファイルをHLS形式に変換するサンプルです。 このサンプルでは bucket の /mp4 ディレクトリにmp4ファイルが何処からかアップロードされた時に /hls 以下にmp4ファイル単位のディレクトリを作りつつHLS形式ファイル一式を保存しています。 ただし、実運用ではmp4用とHLS用の bucket を分けた方が良いと思います。理由等は後述します。 package.json { "dependencies": { "@google-cloud/storage": "^4.3.0", "ffmpeg-static": "^3.0.0", "fluent-ffmpeg": "^2.1.2" } } yarn.lock もコミットに含めておくと良さそうです。 https://clou
Kpetrovi
Online-Kasinos existieren dank der Spiele, die von Software-Entwicklungsfirmen hergestellt werden. Es gibt zwar eine Handvoll Unternehmen, die als die wahren Pioniere des Online-Casino-Glücksspiels angesehen werden, aber es gibt auch neue Unternehmen, die einen ziemlichen Eindruck auf die Branche gemacht haben, Weiterlesen
Google App Engineでローカル開発をするときにdispatch.yamlをもとにReverse Proxyしてくれるツールを書いた - 時計を壊せ
これです github.com なぜ作ったのか dispatch.yaml や dispatch.xml はGoogle App Engine(以下GAE)のFrontendでルールベースでL7 HTTP Reverse Proxyしてくれるものです。 cloud.google.com これはMicroservicesをやる上では大変便利なものになっています。 一方で、これをローカルで動かす手段が少なくとも自分の知る限りはありませんでした。 なので、いままでは各サービスを連携して動作検証したいときは、GAEにデプロイしてしまうか、 あるいは各サービスをそれぞれ別々のポートで立ち上げながら、各サービスに何らかの方法でそれらのマッピング情報を入れてサービス間で連携が可能なようにするなど工夫をする必要がありました。 別々のポートで立ち上げるところまではよしとしても、めんどくさいのでその後の各サー
Google App Engine(GAE)を無料枠で収めるための勘所 | SERVERSUS
公開日: 2019.10.14 Google App Engine(GAE)で1日6000アクセスほどあるAPIサーバーを1ヶ月運用して学んだ、無料枠である1日28インスタンス時間に収めるためのポイントをまとめました。 編集ノート:SERVERSUSでは、パートナーリンクからコミッションを得ています。コミッションが記事の意見や、サービスの評価に影響を与えることはありません。 GAE設定（app.yaml）周りで気をつけたいことautomatic_scalingの設定を適切にするGAEは処理負荷に合わせて自動でスケーリングしてくれる素晴らしいサービスなのですが、逆にGAE側で「もっとインスタンスを増やした方がいいな」と判断されてしまうと、どんどん起動インスタンスを増やしていってしまいます。 そうすると、1日28インスタンス時間はあっという間になくなってしまうので、app.yamlで最大インス
CircleCI Orbsを用いてGoogle App Engine へデプロイ - Qiita
CircleCI Orbs とは何か？ CircleCIの設定(jobやcommand)を共有可能なパッケージにしたもの 以下、公式ドキュメント抜粋 CircleCI Orbs are shareable packages of configuration elements, including jobs, commands, and executors. ちなみにOrbsはココから検索できる。 Orbs を使うと何が良くなる？ (思い付くところ) パッケージを活用することでき、CIフローの実装スピード向上につながる コード量を削減でき、config.ymlのメンテナンス性向上につながる 実際に Orbsを使ってみる 今回はシンプルに、Google Cloud CliのOrbを用いて以下の処理を実装した。 1.GitHubのレポジトリからコードをチェックアウト 2.gcloud CLIの初
面倒なアプリのログイン機能を超簡単に実装する on GCP
この記事は Google Cloud Japan Customer Engineer Advent Calendar 2019 の 16日目の記事です。 tl;dr「Google アカウントを使ったログイン機能を簡単に実装したい！」 Identity-Aware Proxy を使えば、ログイン画面すら作ることなく Google アカウントによるログイン機能を実装できます。ログイン可能なユーザを制限した社内向けアプリ等にも最適です。 「Google アカウント以外のソーシャル ログインもサポートしたい！」 Identity Platform で簡単に実現することができます。Firebase Authentication と共通の SDK が提供されており、ログイン画面も FirebaseUI により簡単に作ることができます。メールアドレスによるユーザリンク機能、マルチテナント対応、SLA も
HTTPトリガーのCloud FunctionsをTypeScriptで開発してローカルでデバッグしてみる - こうりんのブログ
HTTPトリガーで動くCloud Functionsを, TypeScriptからトランスパイルしたコードを使って開発してみる. 更に, コードをローカル環境でデバッグしてGCPにデプロイしてみる. 今回は題材として, 下の記事で書いた機能をTypeScriptで書き直してみる. kourin.hatenadiary.com ローカルのOSはmacOS High Sierra10.13.4で, ターミナルはzshです. ngrokのインストール ngrokはlocalhostで動いているサーバに外部からアクセスするためにURLを発行してくれるツール. 今回はSlackからCloud Functionsの方にアクセスするため, このツールを使用してlocalhostにアクセスできるようにする. ngrokを使うと外部からアクセスできるようになるので, 使う時だけ起動するように.... 以下で
GCP の細かすぎて伝わらないハイブリッドネットワーキング
ベルギーの St. Ghislain にあるグーグルのデータセンターの冷却塔からの蒸気こんにちは、Google Cloud Platform (GCP) でネットワークプロダクトを担当しているカスタマーエンジニアの有賀です。この記事ではクラウドとオンプレミス環境の間や、クラウドとクラウド間のハイブリッドネットワークを構成する時に便利な GCP のサービスをご紹介したいと思います。 TL;DR (というか目次)GCP にはオンプレミス環境とクラウドのハイブリッド環境や、他のクラウドとのマルチクラウド環境を、簡単・効率的に作れる色んなサービス・機能があるので、以下のようなサービス・機能をさくっと(?)ご紹介します。 Cloud VPNVPC ルーティングモードVPC ピアリングカスタム経路 import/exportPrivate Google Access for オンプレミスホストDNS
バッチ処理のスケジューリングパターン
この記事はこの記事は Google Cloud Japan Customer Engineer Advent Calendar 2019 の 12日目の記事です。 はじめにGoogle Cloud Platform (GCP) でバッチ処理を起動するための以下のパターンについてご紹介したいと思います。以下、８パターンあげてみました。とはいえ、最後の3つは GCP のバッチスケジューリングという観点からは少し外れますが、バッチの起動時に使われるということでご容赦を。 Cloud Scheduler : フルマネージドな cron ジョブスケジューラです。フルマネージドという点が非常に大きなメリットであり、多くの処理を自動化し実行することが可能です。Google App Engine cron サービス : HTTP GET を利用して、特定の URLを呼び出します。Google AppEng
Google Cloud Run で社内フリードリンク在庫判定ボットを作ってみた。 - スタディサプリ Product Team Blog
はじめまして、データプロダクト開発チームの@yuu_itoです。 一緒に仕事をしている@toohskとフリードリンクの在庫判定をするSlackボットを作成しましたので紹介します。 フリードリンクとフリードリンク在庫判定ボットとは システム構成 Google Cloud Run について Google Cloud Functions から Cloud Run に移行するためにしたこと 1. Dockerfileの追加 2. Pythonコードの修正 画像分類モデルについて 動作結果 ハマったところ まとめ フリードリンクとフリードリンク在庫判定ボットとは Quipperでは福利厚生の一環として、社内でフリードリンクが提供されています。 フリードリンクの冷蔵庫はオフィスエリアの一角にあり定期的に充填されています。 既にWebカメラを搭載したRaspberry Piで定期的に様子を撮影しており、
「GCP 認定資格チャレンジ - デベロッパー 編」キャンペーンをスタート | Google Cloud 公式ブログ
クラウド テクノロジーが IT の主流となりつつある昨今、多くの企業にとって、クラウドのスキルを持つ技術者の確保が大きな課題となっています。一方で、オンプレミスなど従来からのテクニカル スキルを持つ技術者にとっては、クラウド テクノロジーを学ぶことが今後のキャリアに重要な価値をもたらします。 こうした状況をふまえ、Google Cloud では今年 1 月に発表したように、クラウド スキルの向上支援を本年の重要項目として取り上げています。クラウドの成功に特に必要とされる人材の確保に直結するよう、認定資格のラインアップを増やすとともに、資格取得を支援するトレーニングの提供も推進しています。 このたび、Google Cloud Japan では、今年新たに提供を開始した「Google Cloud 認定 Professional Cloud Developer」の認定資格を、日本語にて提供開始い
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google Cloud Platform リリースノートのFeed URL リストを作りました - Qiita
Google_Cloud_Next_19_AI_ML_Summary_public.pdf
