【登壇】今こそ筋トレと健康をIaC化する時が来ました（GCP：Infrasturacture Managerも語りました） | DevelopersIO
【登壇】今こそ筋トレと健康をIaC化する時が来ました（GCP：Infrasturacture Managerも語りました） 概要 12/15（金）クラスメソッド社内にて「Infrastructure as Code（IaC）の素晴らしさを語らせろ」という社外向け勉強会を開催しました。 詳細はこちら → https://classmethod.connpass.com/event/302466/ 今回は、その時の登壇内容について、ブログで共有させていただきます。 【会場の雰囲気】 登壇資料 IaCとTerraform IaCとは IaC（Infrastructure as Code）は、ITインフラストラクチャの定義とそのプロビジョニングを自動化するための方法です。 Google Cloud（GCP）の場合では、Terraform（Infrasturacture Manager）、Deplo
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? Overview 非同期メッセージングサービス メッセージングミドルウェアやストリーミング分析パイプラインとして使える Pub/Sub Lite: より安価なモード、低信頼性、ゾーナルかリージョナル、キャパシティを指定する トピック: パブリッシャからメッセージが送られるリソース サブスクリプション: 特定のトピックからアプリケーションにメッセージを送るリソース メッセージ: データとアトリビュートの組み合わせ メッセージアトリビュート: パブリッシャが定義するキーバリューペア アクノリッジメント: サブスクライバから送られる受信成功の
GCP Cloud Vision APIでテキスト抽出やーる（Python3.6） - Qiita
from google.cloud import vision import io import os import cv2 import numpy as np from PIL import ImageFont, ImageDraw, Image def detect_text(image): """Detects text in the file.""" client = vision.ImageAnnotatorClient() content = cv2.imencode(".png", image)[1].tostring() tmp = vision.Image(content=content) response = client.text_detection(image=tmp) texts = response.text_annotations if response.e
[GCP]Log AnalyticsとLooker StudioでBigQueryのクエリコストをユーザー別に見える化する - Qiita
[GCP]Log AnalyticsとLooker StudioでBigQueryのクエリコストをユーザー別に見える化するBigQueryLogAnalyticsGoogleCloudLookerStudio 先々月～先月（2022年9, 10月）頃、Cloud LoggingシリーズにLog Analyticsの公開プレビュー版が利用可能になったので、使ってみつつ、Looker Studio（旧Google Data Portal）でBigQueryのクエリコストをユーザー別に見える化するところまで実施してみたので、覚書きを残しておきます。 ※本記事は、2022年11月1日に執筆しました。 用語解説 Log AnalyticsとLooker Studioについて、簡単に解説しておきます。 Log Analytics Cloud Loggingシリーズの機能セットのひとつで、BigQuer
![[GCP]Log AnalyticsとLooker StudioでBigQueryのクエリコストをユーザー別に見える化する - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/26429e0f4e6506e9a138dfca3fb1b625e59fa545/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JTVCR0NQJTVETG9nJTIwQW5hbHl0aWNzJUUzJTgxJUE4TG9va2VyJTIwU3R1ZGlvJUUzJTgxJUE3QmlnUXVlcnklRTMlODElQUUlRTMlODIlQUYlRTMlODIlQTglRTMlODMlQUElRTMlODIlQjMlRTMlODIlQjklRTMlODMlODglRTMlODIlOTIlRTMlODMlQTYlRTMlODMlQkMlRTMlODIlQjYlRTMlODMlQkMlRTUlODglQTUlRTMlODElQUIlRTglQTYlOEIlRTMlODElODglRTMlODIlOEIlRTUlOEMlOTYlRTMlODElOTklRTMlODIlOEImdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT01NiZ0eHQtY2xpcD1lbGxpcHNpcyZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPTA3YzhmMWM0ODdkOTI5MGRhMzcyYWEyMGYzZmZiZGY3%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTcxNiZ0eHQ9JTQwQ19IRVJPJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9MzImdHh0LWFsaWduPWxlZnQlMkN0b3Amcz01M2I4YzAxNWZhODNkYjA1ZjA0NTA1ZjYyM2MyMGZlNQ%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D8ed796666e6a007091ac599b347f8e23)
ずっと無料の個人用サーバを3ステップで立ち上げる方法【GCP】
エンジニアという仕事柄、Googleの業務用サービスこと「GCP」を触ったりします。 Googleが持つサーバなどを従量課金で使えるのですが、太っ腹なことに「月に●●までならタダ」という無料枠があるんですね。
現場をデジタル化する「tebiki」がシードでGCPから3億円調達、著名投資家と連続起業家がタッグ - BRIDGE（ブリッジ）
tebiki（テビキ）・素材提供：ピナクルズ ニュースサマリ：現場教育のデジタル化を手掛けるピナクルズは9月15日、第三者割当増資の実施を公表している。調達した資金は3億円で、ラウンドはシード。引受先になったのはグロービス・キャピタル・パートナーズ。同社は今回の調達にあわせ、2019年に実施したエンジェルラウンドにおける増資で、有安伸宏氏、辻庸介氏、赤坂優氏の3名から合計5,000万円の出資を受けていることも明らかにした。なお、有安氏がその内3,000万円を出資している。 ピナクルズが提供するのは小売や飲食、製造、物流など人手がかかる「現場」のオペレーションを教育するための動画プラットフォーム「tebiki（テビキ）」。現場のOJTをスマートフォンアプリで撮影することで、短い動画マニュアルを作成することができる。特徴は音声認識と字幕作成で、撮影した動画から自動的にテキストを抽出し、外国人労
はじめに こんにちは。プロダクトエンジニアグループ所属の@sato-s, @kawaです。普段はSmartHRのオプション機能の開発をしています。この記事では「GitHubのPull Requestごとに動作確認が可能な検証環境をGoogle Cloud上に構築する仕組み」を作った話をご紹介します！ 背景 SmartHRでは2022年にインフラをAWSとHerokuからGoogle Cloudへ全面移行しました。（Google Cloudへの全面移行についてはGoogle Cloudの顧客事例として紹介していただき、2022年の Google Cloud Day: Digital ’22 でも登壇を行いました。） 以前はHerokuを利用していたこともあり、Herokuが提供するReview Appsというサービスを活用していました。 Heroku Review Appsとは、GitHub
はじめに 最近GCPでWebサービスを立ち上げたので、そのときに実施したことをメモとして残しておきます。 今回はGCEで Debian + Nginx + Railsで環境を作りました。 ドメイン取得以外は終始無料で進めるための努力をしました。 また、今回はRailsアプリケーションを作成することは目的としていませんので、そこについてはあまり触れません。 やったこと GCEでインスタンスを立ち上げる アカウント作成時に貰える無料トライアル枠とは別に、無料で利用できるリソースがあります。 Always Free と呼ばれていて、GCEの場合は以下の要件を満たすインスタンスのみ永久に無料でインスタンスを立てることができます。 リージョンをus-*1から選択する 1つのf1-micro VM インスタンス 30GB以内 の永続ストレージ ※無料対象リージョンはus-*1のみというご指摘を受けまし
2020年現在、顧客に提供するITサービス構築を始める際、コスト面や構築スピードの面から、GCPやAWSといったパブリッククラウドサービスの利用を検討することが多くなっています。 少しでも安くITサービスを構築するには、どのパブリッククラウドを利用すればいいか、悩んだ経験はございませんか？ 本記事では、GCPとAWSそれぞれ、どのような点にお金がかかり、利用コストにどれくらいの差があるのか、詳しく記載していきます。 GCPとは？ コストの比較をする前に、GCPとAWSについて、どのようなクラウドサービスなのか、軽くおさらいをしていきます。 GCP(Google Cloud Platform)は、Googleが提供するクラウドサービスです。 現在クラウドサービスのシェアは世界第4位になります。 TensorFlowやBigQueryといった大規模なデータ分析やAI、Kubernetesといっ
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? はじめに 取得してからだいぶ経っていますが、Google Cloud認定資格の中では、Professional Cloud Architectに次いで、Professional Data Engineerを受験する方が多いのかなと思い要点をまとめてみました。 本記事を読んだだけで合格できる、ということを保証するものではありませんので、ご了承ください。 (2024/11/2追記) 2024/10 に本資格を更新した際のアップデートを下記記事にまとめていますので、併せてご参照ください。 もくじ Professional Data Engin
1. はじめに 本編は以下記事の続編になります。 前の記事ではAWS側のロールを経由して、GCP側からAWSへキーなし認証を実現することができました。 本編ではその逆で、AWS側からGCPへキーなし認証を実現していきます。 AWSとGCP間はよいお友達笑笑 2. 構成図 GCP側のWorkload IdentityがAWS側のIAMとマッピングします。 マッピング後、Service Accountと連携します。Service Account側でアクセスできるロールを制御しています。 AWS側のEC2が、IAM Roleを利用して、Workloan Identity→Service Account経由し、最終的にCloud Storageを作ることになります。 3. AWS側構築 １．IAM Roleを作成 ユースケース：EC2 権限：AmazonSSMFullAccess（EC2にSSMエ
【まとめ】Google Cloud Next Tokyo ’24 DAY 2 ブレイクアウト セッション「BNE ゲームタイトルにおけるリリース前後のインフラの最適化と課題」 こんにちは、クラウドエース 技術本部 SRE 部の高橋です。 2024 年 8 月 2 日、Google Cloud のカンファレンス イベント Google Cloud Next Tokyo ’24 DAY 2 が開催され、Google Cloud の生成 AI のコンセプトと実際の活用事例についての発表が行われました。 今回は、Google Cloud Next Tokyo ’24 DAY 2 のブレイクアウト セッション「BNE ゲームタイトルにおけるリリース前後のインフラの最適化と課題」の内容をご紹介します。 このセッションでは、株式会社バンダイナムコエンターテインメント（以下、BNE社）がネットワークをメイ
はじめに COVID-19のせいで時間があり余っているため、少しだけ知識のあるJQueryやPython等を使って何かサービスを外部公開できないか考えてみた。 いろいろ考えてみたが、自分が使いたいものを作ってみることにした。それはモバイルSuicaの利用履歴を経費精算に簡単に出せるように編集するというものである。 完成品はこちら https://www.mobilesuica.work 筆者のレベル プログラムを最初に触ったのは25年前に大学の研究でC言語を利用したとき 大学卒業後は全く触れなかったが、10年ほど前にちょこっとRubyとVisual Basicを、2年ほど前からPythonでREST APIを叩くスクリプトを作り始める（自社製品の勉強も含めて） 2020年の2月ぐらいから社内の詳しい人に教えを請う形でJavascript+Python+Dockerという今回のアーキテクチャ
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?
[GCP]継続的にAPIを利用するための、リフレッシュトークンを用いたアクセストークンの取得方法 - Qiita
はじめに アクセストークンは1時間ほどで有効期限が切れてしまうため、継続的にAPIを利用するためには定期的にアクセストークンを更新する必要があります。 GUIの場合だと以下のURLから手動で更新が可能ですが、この方法だと自作アプリに組み込めません。 https://developers.google.com/oauthplayground/ そこでcurlコマンドが利用できる、リフレッシュトークンを用いたアクセストークンの取得方法をまとめました。 手順 1. OAuth 2.0 クライアント ID の作成 まずOAuth 2.0 クライアント IDを作成する必要があります。 認証情報画面を開く GCPにログイン後、APIとサービス -> 認証情報 を選択すると認証情報画面が表示されます。 OAuth クライアント ID選択 認証情報を作成を選択し、OAuth クライアント IDを選択してく
![[GCP]継続的にAPIを利用するための、リフレッシュトークンを用いたアクセストークンの取得方法 - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/cc7db13f65093005b0679925e6f1a62246e96047/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-412672c5f0600ab9a64263b751f1bc81.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTk3MiZoPTM3OCZ0eHQ9JTVCR0NQJTVEJUU3JUI2JTk5JUU3JUI2JTlBJUU3JTlBJTg0JUUzJTgxJUFCQVBJJUUzJTgyJTkyJUU1JTg4JUE5JUU3JTk0JUE4JUUzJTgxJTk5JUUzJTgyJThCJUUzJTgxJTlGJUUzJTgyJTgxJUUzJTgxJUFFJUUzJTgwJTgxJUUzJTgzJUFBJUUzJTgzJTk1JUUzJTgzJUFDJUUzJTgzJTgzJUUzJTgyJUI3JUUzJTgzJUE1JUUzJTgzJTg4JUUzJTgzJUJDJUUzJTgyJUFGJUUzJTgzJUIzJUUzJTgyJTkyJUU3JTk0JUE4JUUzJTgxJTg0JUUzJTgxJTlGJUUzJTgyJUEyJUUzJTgyJUFGJUUzJTgyJUJCJUUzJTgyJUI5JUUzJTgzJTg4JUUzJTgzJUJDJUUzJTgyJUFGJUUzJTgzJUIzJUUzJTgxJUFFJUU1JThGJTk2JUU1JUJFJTk3JUU2JTk2JUI5JUU2JUIzJTk1JnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnR4dC1jb2xvcj0lMjMxRTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9NTYmcz00OTE3MWFiMGU3MWNjZTU3YWZjN2VmNDE4YTJlNmUwMw%26mark-x%3D142%26mark-y%3D57%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZoPTc2Jnc9NzcwJnR4dD0lNDBoYW56YXdhayZ0eHQtY29sb3I9JTIzMUUyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTM2JnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9Mzk3NWY0ZmEwZjM2ZjI1OWE4NjQxNjZkOGVkZGJjYTA%26blend-x%3D142%26blend-y%3D486%26blend-mode%3Dnormal%26s%3D5de20b09f608138f6c945adf0ad9275c)
Google Cloud（旧GCP）無料で使ってみた！クラウド初心者もかんたんに開設、始め方大解説（前編：説明編） - G-gen Tech Blog
こんにちは、G-genの荒井（@arapote）です。みなさん、パブリッククラウドはご利用でしょうか？！既に利用されている企業様も多いかと思いますが、全国的にはまだまだオンプレミスを運用している企業も多くいらっしゃると思います。今回はそんな方々でも、かんたんにクラウドを体験していただけるよう、無料で Google Cloud（旧称 GCP）をご利用いただける方法をご紹介いたします。 Google Cloud って無料で使えるの？ 「無料枠」と「無料トライアル」 無料枠とは 無料枠の適用範囲 無料トライアルとは 利用イメージ 利用料金の例 Google Cloud 利用開始準備 手順の概要 必要なもの Googleアカウントの準備 無料 Google アカウントの作成 後編へ ※本記事に記載の情報は2024年11月時点のものです。 Google Cloud って無料で使えるの？ 早速本題の「
【GCP/Terraform】 外部IPアドレスを持たないVMインスタンスからCloud NAT経由でインターネットへアクセスする
TL;DR こちらのリポジトリを参考にしてください -> https://github.com/nekoshita/gcp-cloud-nat-example こんな人向け Cloud NAT について知りたい＆使ってみたい GCPのVPCとかsubnetとかFirewallとかよくわかんない terraformでGCPさわりたい Cloud NAT について Cloud NAT とは NATを提供してくれるGoogleのマネージドサービスです 外部IPアドレスを持たないVMインスタンスや限定公開のGKEクラスタからインターネットへアクセスできるようになります Cloud NAT のメリット 個々のVMに外部IPアドレスを割り振る必要がなくなるのでよりセキュアになる 分散マネージドサービスなのでプロジェクト内のVMや単一の物理ゲートウェイデバイスには依存しない NATのIPアドレスを自動で
$ cd docker-airflow $ ls -la drwxr-xr-x@ 14 minarai staff 448 5 7 13:24 . drwxr-xr-x@ 3 minarai staff 96 5 7 13:24 .. -rw-r--r-- 1 minarai staff 5 5 7 13:04 .dockerignore drwxr-xr-x@ 12 minarai staff 384 5 7 13:04 .git drwxr-xr-x@ 3 minarai staff 96 5 7 13:04 .github -rw-r--r-- 1 minarai staff 475 5 7 13:04 .gitignore -rw-r--r-- 1 minarai staff 2426 5 7 13:04 Dockerfile -rw-r--r-- 1 minarai staff
「Google Cloud VMware Engine」とは？ VMwareの仮想マシンをGCPで動かす
関連キーワード VMware vSphere | Google | VMware | パブリッククラウド | 仮想環境 Googleのクラウドサービス「Google Cloud Platform」（GCP）のユーザー企業は、GCPのインフラでVMwareのプライベートクラウド構築製品群「VMware Cloud Foundation」を利用できるようになった。新GCPサービスの「Google Cloud VMware Engine」を利用することで、ユーザー企業はGoogleが提供する専用のベアメタルサーバ（物理サーバ）で、VMware Cloud Foundationを運用できる。 「Google Cloud VMware Engine」とは
【GO】 外部ライブラリを用いたコードをテスタブルに書き換える ~GCPクライアントライブラリ編~ - ヘヴィメタル・エンジニアリング
はじめに よくGOに触れるものです。 以前、GCPのクライアントライブラリを使ったコードを書いていたときに、それをテスタブルに書くにはどうすれば良いのか試行錯誤したので、その内容について書いていこうと思います。 特にGCPに偏った話ではなく、外部ライブラリを用いているコードに対しても応用が効くので、誰かの助けになればと思います。 最終的に出来上がったコードはGitHubで公開しています。 github.com 初期コード 今回はBigQueryのクライアントライブラリを例にとって説明します。 ローカルからBigQueryに接続する方法は省略していますが、権限をもったサービスアカウントのキーをローカル環境変数のGOOGLE_APPLICATION_CREDENTIALSに読ませています。 まずは適当なGOプロジェクトを作成して、BigQueryのクライアントライブラリをinstallします。
関連キーワード Google | 仮想マシン（VM） | API | セキュリティ | セキュリティポリシー クラウドセキュリティベンダーのMitiga Securityは、Googleのクラウドサービス群「Google Cloud Platform」のセキュリティを調査する過程で、サイバー攻撃者によって悪用される恐れがある2つのAPI（アプリケーションプログラミングインタフェース）を発見した。今回の調査に携わったMitigaのプリンシパルコンサルタント、アンドルー・ジョンストン氏は調査報告の中で、2つのAPIを悪用する攻撃シナリオのリスクを懸念する企業のために、GCPインフラの堅牢（けんろう）化の方法を説明している。 ジョンストン氏が説明する堅牢化方法の一つは、あらかじめベンダーが設定している組み込みのロール（アクセス権限群）を使用せず、「最小特権の原則」に従って、必要に応じて特定のアク
※内容の理解なんてどうでもいいからとにかく合格したいという人向け 先日テストセンターでGCP PCAを受験し、合格しました。 例によって誰かの参考になればと思い書き記しておきます。 GCP ACE編はこちら 早速本題ですが、GCP PCAに合格するには1日あれば十分だなと感じました。 では、具体的に何をすれば1日で合格できるかというと、下記リンク先のUdemyの問題集を全て丸暗記しましょう。それだけで合格できます。 内容の理解なんてどうでもいいからとにかく問題と答えを対応させてそのまま覚えればOKです。あとはちゃんと試験を受けるだけであなたはその日からGCP PCA資格保有者です。 おめでとうございます。 https://www.udemy.com/course/google-cloud-professional-cloud-architect-i/ 僕は偉いから公式ドキュメントとかもそれ
Google Cloud DNS の「DNS転送」を使って GCP 外のネームサーバに DNS クエリを転送する - Qiita
#はじめに AWS - GCP 間を VPN で繋ぎ、マルチクラウドで色々なアプリケーションを運用していくと、どうしても避けて通れなくなるのが「名前解決」の問題です。 例えば、AWS 側にプライベートドメインを管理するネームサーバを置いている場合、GCP からもそのドメインに所属するサーバについてホスト名（FQDN）でアクセスさせたい場面もあるかと思います。 まだ稼働しているサービスが少ない場合は力業で対応することもできますが、数が多くなってくると徐々にフォローできなくなり破綻してしまいます。 2019年の初頭、Google Cloud DNS の新しい機能「DNS 転送」が発表されました（投稿時点ではまだベータ版）ので、それを使ってこの問題を解決してみます。 構成 以前投稿した「AWSとGCP間をVPN接続してみた」をベース構成とします。 （AWS-GCP間が Cloud VPN で接続
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? こんにちは、えいりんぐーです 2年に1度のイベントがやってきましたね、そうGCP資格の更新です。 私はこれまで 2020年10月 2022年10月 とProfessional Data Engineer試験に合格しました。 それから2年たち、アップデートされているので、勉強しつつ記録を残したいと思います。 とりあえず今回は、試験のおさらいと、勉強方法、サービスの種類などをまとめます。 Professional Data Engineer とは 公式のページに書いてある通り、GCPを使って、セキュリティやコストを考慮しつつ、データ基盤の構
最近、GCPのサービスとしてdatasreamを知り、結構便利なのでは？と思ったので纏めてみたいと思います。 CDCとは？ datasreamはCDCのサービスですが、このCDCは change data capture といい、簡単にデータが変更された差分だけを保存する機能です。何かしらの一意のキーを元に変更されたレコードや新規に追加されたレコードを検出することで、変更分だけのデータを取得します。 具体的には 変更した日付(LAST_UPDATE)やテーブルカラムにバージョンをつけて管理する(VERSION_NUMBER)などですね。 このCDCの概念自体は元から存在していたのですが、デザインパターンレベルだったので利用するためには実際に実装する必要がありました。 Datastream GCPのdatasreamは先ほど述べた通りCDCのサービスなのですが主に以下のメリットがあります。
GCPでMiniKFを実践した
前回はGoogle Cloud のMLOps サービスAI Platform Pipelines で 簡単に手書き数字の分類システム（MNIST）を開発する例（GCP:AI platform pipelinesで MLOpsを実践した）を紹介させていただきました。 今回はGCP でKubeflow の環境を構築するもう一つの方法であるMiniKF を皆さんへ紹介します。 ※GCP及びMiniKFの利用料金がかかります MiniKFとは MiniKF は名前のとおりクラウド（GCP/AWS など）に一つの instance でKubeflow を自動的に環境構築するツールです。MiniKFを利用して数分間でWeb UIでKubeflowの環境構築ができるので大変便利です。 MiniKFのインストール画面を探す GCPのMarketplaceでMiniKFを探してください。 MiniKF を選
グローバルIP無しのセキュアなリモート開発環境を構築 by VSCode Remote Development x GCP x IAP
目次 これは何 やってみた履歴 手順詳細 1. これは何 今回は「グローバルIPアドレスを持たないセキュアなGCE環境」と「VSCode Remote Development」を組み合わせて、グローバルIP経由しないリモート開発環境を実現する方法を記載しています。 VSCode Remote Development、もしくはGoogle IAP単体記事は見つけましたが、両方を組み合わせた記事が無かったので忘備録として記録しておきます。 最後に詳細な手順を記載していますので、経緯飛ばして手順を知りたい方は 手順詳細 から読んでください Identity-Aware Proxyとは Google Cloud のIAP（Identity-Aware Proxy）ってご存知ですか？ 既存のWEBサービスに対して認証機能を挟むことができる仕組みです。その機能の中に TCP 転送での IAP の使用
AWS・Azure・GCPに「モテモテの」VMware、「CloudSimple」を巡る争いをどう見るべきか（ビジネス＋IT） - Yahoo!ニュース
マイクロソフトは2020年5月初め、VMwareクラウドをAzureのベアメタルインフラストラクチャ上に構築および実行できる新サービス「Azure VMware Solution」の登録制プレビューを開始しました。一般提供の開始は2020年下半期とされています。この動きの背景にあったのが、2019年11月にグーグルがVMware実行環境を提供する「CloudSimple」を買収したことでした。 【詳細な図や写真】画面1：Azure VMware Solution by CloudSimpleの製品サイト（新しいプレビューの発表前） ●パブリッククラウドベンダー各社にモテモテのVMware パブリッククラウドベンダー各社のIaaS（サービスとしてのインフラストラクチャ）環境は、各社が採用するハイパーバイザーを中心に、独自の仮想ストレージや仮想ネットワーク、各種サービス（バックアップや災害復旧
GithubActions からGCPリソースに秘密鍵を作らずにアクセスする - OLTA TECH BLOG
OLTAの柴田です。GCPとGithub Actions間の認証をキーレスで行う方法を紹介します。この記事を見れば利用している技術の概要が把握でき、GCP、Github Actionsの設定まで行えるようになると思います。 概要 Github Actions からGCPのリソースにアクセスするとき、GithubのOpen ID Connect(OIDC)と、GCPのWorkloadIdentity Federationを利用すると、秘密鍵を作成することなくOIDCトークンを利用してGithub ActionsからGCPにアクセスすることができます。 OIDCトークンで認証を行い、都度有効期限が短いアクセストークンを利用してGithubからGCPにアクセスすることになるので、サービスカウントキーのメンテナンスとセキュリティの負担がなくなります。 この仕組みができる前は、GCPのサービスアカウ
GitHub - HariSekhon/DevOps-Bash-tools: 1000+ DevOps Bash Scripts - AWS, GCP, Kubernetes, Docker, CI/CD, APIs, SQL, PostgreSQL, MySQL, Hive, Impala, Kafka, Hadoop, Jenkins, GitHub, GitLab, BitBucket, Azure DevOps, TeamCity, Spotify, MP3, LDAP, Code/Build L
Scripts for many popular DevOps technologies, see Index below for more details Advanced configs for common tools like Git, vim, screen, tmux, PostgreSQL psql etc... CI configs for most major Continuous Integration products (see CI builds page) CI scripts for a drop-in framework of standard checks to run in all CI builds, CI detection, accounting for installation differences across CI environments,
ゲンゾウ用ポストイット シェル / Bash / Linux / Kubernetes / Docker / Git / クラウドのtipsを発信。 はじめに現職ではAWSよりもGCPにインフラリソースを多く配置しています。 gcloud コマンドを使って作業をする事が多いですが、更に最近ではGCPプロジェクトも複数またがって作業する事が増えてきました。 かんたんにGCPプロジェクトを切り替えられるかが作業の効率化のために重要です。 かんたんにGCPプロジェクトをスイッチし、Compute Engineインスタンスにssh接続するためのaliasを作成したので紹介します。 検証環境$ uname -moi x86_64 MacBookPro16,1 Darwin $ bash -version | head -n 1 GNU bash, version 5.0.18(1)-release
関連キーワード Google | Amazon Web Services | Microsoft Azure | ロードバランサ 「ロードバランサー」（負荷分散装置）「ロードバランサー」（負荷分散装置）は、アプリケーションが受信したデータを複数のサーバに分散するアプライアンスまたはソフトウェアだ。IT部門は、特定のサーバに過度の負荷が掛かったり、過剰なトラフィック（データ量）が障害を引き起こしたりしないように、ロードバランサーを使用する必要がある。 AWS、Microsoft、Googleの主要ロードバランサーサービスを整理 併せて読みたいお薦め記事 クラウドのネットワークを理解する いまさら聞けない、クラウドのネットワークを理解する「6大基礎用語」 「クラウドバースト」とは？ オンプレミスの過剰な負荷をクラウドに分散 ハイブリッドクラウド向けロードバランサー、3つの最適化戦略とは ネット
GCP上でのETLいろいろ | てくてく無窮動
Courseraの「 Building Batch Data Pipelines on GCP」を受講した上での整理。 ETLとは？Extract, Transform, Loadのこと。 データソース（多くは各アプリケーションから蓄積しているDBやストレージ） => 変換処理 => 一元的なデータ置き場（DB, DWHなど）という流れになる。 ELT, ELもある。これらとの違いは変換処理の有無や順番。 Transformが単純なSQLで書けない（もしくは書きづらい）ような複雑なものであったりTransformに時間がかかる場合はETL, そうでない場合はELT, TransformなしでいけるならELという感じ。 ETL - ELT 引用: https://aws.amazon.com/jp/blogs/news/etl-and-elt-design-patterns-for-lake
AWS App Runner のオートスケールは GCP Cloud Run ほど滑らかではなさそう - にゃみかんてっくろぐ
方法 同時接続数 4 で観察 AWS App Runner: 20 インスタンスも起動する GCP Cloud Run: 4 インスタンスだけ起動する 突然 20 同時接続して観察 AWS App Runner: 過半数がエラーに GCP Cloud Run: すべて正常応答 まとめ: App Runner のオートスケールは Cloud Run ほど滑らかではなさそう 補足: App Runner の裏側は Fargate タスク (2023/05/06 追記) 先日、 AWS から App Runner というサービスが発表された。すごく GCP の Cloud Run っぽい。 ただ、新規サービス作成に 5 分待たされてしまった。 東京リージョンで nginx サービス作成時間 3 回はかってみたけど - GCP Cloud Run: 25 秒、 12 秒、 8 秒 - AWS Ap
文字認識率(%)…正しく認識された文字数 / 検証画像の総文字数 * 100 ノイズ数…検証データに含まれない文字を文字として認識した数 文字認識率はAzureもGCPともに精度は非常に高く僅差でAzureの方が良い結果でした。 ノイズ数はAzureの方が良い結果となりました。GCPの方がノイズが少し多めで、バグの様な出力も見られました。 以下で、具体的な事例をいくつか紹介したいと思います。 文字誤認識の例 まずはAzureのOCR機能(Read API)の誤認識の例です。 ベンダとOCRしてほしいところを"ペ"ンダとOCRしています。 次にGCPのOCR機能(Vision API)の誤認識の例です。 住所とOCRしてほしいところを主 PFとOCRしています。 所がPFとOCRされているのは少し笑ってしまいました。 Azure、GCP共に、別の箇所では正しく「ベンダ」「所」と認識できていた
【個人開発】Next.js 13 (App) × GCP × Cloudflare × microCMSを駆使してブログをリニューアルする
はじめに 私は https://rl-japan.com というサイトを運営しています。 これは「ロケットリーグ」というゲームに関するニュースや攻略情報をまとめたサイトです。 日本において、このゲームの情報は限られているため、2021年よりロケットリーグ専門の情報ポータルサイトとして運営を開始しました。現状、ページビュー(PV)やユニークユーザー数(UU)も安定しており、コミュニティへの貢献を実感している今日この頃です。 プロジェクトの背景と目的 以前の「RL Japan」のトップページでは、microCMS様が公式で提供しているオープンソースのテンプレート[1]を採用していました。このテンプレートは複製・改変・商用利用が可能で、ブログ公開に必要な機能が網羅されているため、すぐに公開でき非常に助かりました。技術的にはNuxt.js (Vue2) と Netlify/Netlify Func
GCP入門［第3回］ストレージとデータベース
GCPのストレージサービスは、前回取り上げた、仮想マシンの永続ディスクに加え、「Google Cloud Storage（以下、Cloud Storage）」がある。データベース（DB）のサービスとしては、「Google Cloud Bigtable（以下、Cloud Bigtable）」「Google Cloud Datastore（以下、Cloud Datastore）」「Google Cloud SQL（以下、Cloud SQL）」「Google Cloud Spanner（以下、Cloud Spanner）」の4種がある（表1）。 最初に、仮想マシンの永続ディスクを除いて、これらのサービスを簡単に説明する。 Cloud Storageは、Amazon S3相当のオブジェクトストレージである。S3との違いは、独自のCDN（Content Delivery Network）機能（AWS
※この投稿は米国時間 2021 年 12 月 14 日に、Google Cloud blog に投稿されたものの抄訳です。 この 3 年間、Google のフルマネージド非同期実行管理サービスである Cloud Tasks は、Google Cloud をご利用の世界中のお客様の本番環境のインフラストラクチャにおいて不可欠な要素となっています。本日、世界中の複数の GCP リージョンで Cloud Tasks のキューを作成できるようになりましたことを発表いたします。 Google Cloud には、「ユーザーに焦点を絞れば、他のものはみな後からついてくる」という理念があります。Google は、お客様が複数のクラウド リージョンに分散したコンポーネントを使用して、高性能なクラウド サービスをデプロイしていることに気づきました。Cloud Tasks はリージョン サービスであり、今日まで
【統合版Minecraft】クロスプレイ可能な統合版MinecraftサーバーをGCEにたてる【GCP】 - チャチャチャおもちゃの抹茶っちゃ
やりたいこと 統合版Minecraftって？ Minecraft のサーバー 統合版Minecraftサーバーの構築 環境 インスタンス作成 サーバー設定 バックアップの設定 おまけ おわりに やりたいこと 統合版のMinecraft で、クロスプレイ可能なサーバーを、Realms使ったりフレンドのワールドにログインするとかなしにたてたい。 統合版Minecraftって？ 前々から遊んだりしていたMinecraftはJava版で、PCでのみプレイが可能だった。ところがPC以外のNintendo SwitchだとかXBoxだとかでもMinecraftがリリースされはじめて、それが「統合版」と呼ばれている。ちょっと古い呼び方をすれば「Bedrock Edition」。PCでプレイする場合はJava版もプレイできるし、Microsoft Storeで「Minecraft for Windows
スタートアップをはじめとした新産業領域を担当。IT系メディア「CNET Japan」編集記者、米国スタートアップメディア「TechCrunch」の日本版である「TechCrunch Japan」の副編集長などを経て、2019年にダイヤモンド社に入社。ダイヤモンド編集部 副編集長、DIAMOND SIGNAL編集部 編集長を務める。2024年1月より現職。編集協力に『ザ・スタートアップ ネット起業！あのバカにやらせてみよう』（ダイヤモンド社）。 From DIAMOND SIGNAL スタートアップやDX（デジタルトランスフォーメーション）を進める大企業など、テクノロジーを武器に新たな産業を生み出さんとする「挑戦者」。彼ら・彼女にフォーカスして情報を届ける媒体「DIAMOND SIGNAL」から、オススメの記事を転載します。※DIAMOND SIGNALは2024年1月をもって、ダイヤモンド
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GCP: Cloud Pub/Sub - Qiita
GCPを使ってPRごとに検証環境を用意した話 - SmartHR Tech Blog
GCPで永久無料枠を利用してサービスを立ち上げたときにしたことの備忘録 - Qiita
【2020年最新】GCPとAWSでの利用料の費用（コスト）比較をしてみた！ - 株式会社G-gen（ジージェン）
GCP認定Professional Data Engineer受験対策 - Qiita
【AWS】【GCP】AWSとGCP間のキーなし認証を試みる(2) AWS→GCP - Qiita
3大クラウドの 機械学習 / AIを比較してみた【AWS・Azure・GCP】 | クラウドエース株式会社
JQueryとPythonを勉強しながらGCP上でWebサービスを公開するまで - Qiita
GCPでJupyterLabを使ってBigQueryのデータを可視化してみた - Qiita
GCP Cloud Composerを使いこなすまでの道のり - Qiita
GCP“危ないAPI”の発見者が語る クラウドとオンプレミスの“根本的な違い”
GCP PCA(Professional Cloud Architect)に1日で合格する方法｜わっほい
GCP Professional Data Engineer勉強記 - Qiita
GCPのCDCサービス、DataSreamとはなんなのか？ - Qiita
gcloudとfzfを組み合わせてGCPプロジェクトを簡単に切り替える | ゲンゾウ用ポストイット
AWS、Azure、GCPの「ロードバランサーサービス」の違いを理解する
【2021年版】Azure/GCP/AWS OCRサービス比較 - Qiita
Cloud Tasks、GCP の 23 リージョンで利用可能に | Google Cloud 公式ブログ
【GCP高宮×Astar渡辺】Web3とWeb2はトレードオフではなく、補完するもの（前編）