【Sansan Tech Talk】新規事業開発におけるInfrastructureグループの技術的挑戦 〜安定運用とスピードの両立を目指して〜 - Sansan Tech Blog
こんにちは、Sansan Engineering Unitの副部長、笹川 裕人です。今回の「Sansan Tech Talk」では、Strategic Products Engineering Unit（以下、SPEU）という新規事業開発を行っている部門のInfrastructureグループマネジャーを務める水谷 高朗にインタビューしました。この対談では、テックリードたちが直面している技術的な課題や取り組みについて深掘りします。 ▼連載記事はこちら buildersbox.corp-sansan.com （写真左から）Strategic Products Engineering Unit Infrastructureグループマネジャー 水谷 高朗、Sansan Engineering Unit 副部長 笹川 裕人 笹川：それでは水谷さん、自己紹介をお願いします。 水谷： SPEUのInfr
MIGによるサーバー費用削減：エンジニアによる実践記 - COLOPL Tech Blog
都内某日、在宅勤務でとあるゲームの運用を行っていた男は プロジェクトマネージャーから打診を受ける。 M「サーバー費用はこんなにかかるものなのですか？」 他のプロジェクトと比較してみても、そこまで目立って多いわけではない ある意味では適正である。 スペックの見直しをしてどのくらい費用が抑えられるのか ───── その後、男はある疑問を抱えることになる。 「夜間のサーバー維持費はもっと抑えることができるのではないか？」 男は名を田中という、コロプラのバックエンドエンジニアである。 〜プロジェクト MIG〜 お急ぎの方は、記事の最後に対応まとめを記載しておりますので、そちらをご覧ください 目標と課題 時は少し遡り マネージャーからの打診を受けた日、田中は売り上げとサーバー維持費の比率を眺めていた。 田中「意外と日々の売り上げに対してサーバーの維持費は結構かかってるなぁ」 マネージャーから打診を受
Google Cloudのしくみと技術がしっかりわかる教科書を読んだ感想 | フューチャー技術ブログ
はじめに金融グループ所属、新人の藤戸四恩です。 インデックス記事に書かせていただきましたが、積読消化目的で参加させていただきました。 読書感想文連載 の8冊目は、技術評論社から出版されている 図解即戦力 Google Cloudのしくみと技術がこれ1冊でしっかりわかる教科書 です。 この書籍を選んだ理由としては、CCoE(クラウド活用推進組織)メンバーに参加しGoogle Cloud に触れる機会があったのですが、いままではCloudというものに触れてこなかったため全体像を掴みたいと考えたからです。 気になったところについて感想を書いていきたいと思います。 書籍の概要この書籍は2021年9月3日に発売された本で、Google Cloudに関する基本的な知識を学ぶことができます。 下記の通り10章から構成されています。 1章 Google Cloud の基礎知識 2章 クラウドの仕組みとGo
BigQuery から Cloud Spanner に直接クエリを実行し、トランザクションデータをリアルタイムに分析しよう | 株式会社G-gen（旧 株式会社トップゲート）
削除する Google Service TGカルチャー アプリケーション開発 コンサルティング セミナー テックブログ デザイン デジタルプロダクト開発 開発実績 ニュース 2025年の崖(1) 5G(1) AI(39) AI Hub(1) AI Platform(1) AlloyDB(12) AlloyDB for PostgreSQL(6) AlphaZero(1) Analytics HUB(1) Android(11) Android アプリ(1) Anthos(6) API(12) API エコノミー(1) APP(2) App Engine(2) App Maker(2) AppServer(1) AppSheet(3) arduino(1) Authentication(1) AutoML(4) AWS(12) AWS (Amazon Web Services)(1) AWS
データウェアハウスの開発で苦しんだ話 - Google Ads配信データの収集 - Kaizen Platform 開発者ブログ
SRE Groupの本田（@mov_vc）です。 今回はKaizen Adで運用している広告データ収集基盤について、Google広告の例をもとに開発事例を共有できればと思います。 背景 Kaizen Adでは、広告配信データを収集、活用しています。広告配信データとは、例えば以下のようなものです。 メトリクス名 意味 Cost 広告費用 Impressions 広告を閲覧した人数 Conversions 広告を閲覧して購入に至った顧客数 Sales 広告商品の売上 CVR (Conversion Rate) Conversion÷Impressions CPA (Cost Per Action) Cost÷Conversion ROAS (Return On Advertising Spend) Sales÷Cost こうしたデータは広告の効果測定の定量的な指標となり、より良い動画広告を作る
AWSとGoogle Cloudからみた技術選定の考え方と工夫 基本はマネージドでカスタムが効くものも活用する
クラウド(AWS&Google Cloud)を利用した社内システムの開発をしているエンジニアが、技術選定・アーキテクチャ設計・開発・保守の工夫や、ベストプラクティスの活用などについて語る「AWS & Google Cloudを使ったシステム開発/技術選定のはなし」。ここでアイレット株式会社の高橋氏が登壇。ここからは、開発・技術選定の基本的な考え方や注意点、工夫について紹介します。前回の記事はこちらから。 開発・技術選定の基本的な考え方 高橋修一氏（以下、高橋）：今のがベストプラクティスで、ここからがちょっと僕の共有になります。基本的な考え方は一般的ですが、できるだけマネージドのものを使う。AWSであればコンピューティング、EC2よりもFargateとか。LambdaでいいのであればLambda。Google Cloudでは、Google CloudエンジンなのでCloud RunとかClo
入社一ヶ月でGKEのSecret管理基盤を作った話 - エムスリーテックブログ
こんにちは。エムスリーエンジニアグループAI・機械学習チームで2021年新卒の北川(@kitagry)です。最近買ってよかったものは低温調理器です。リモートワークとの相性が抜群です。 今回は僕が入社1ヶ月ほどで作成した、GKEのSecret管理基盤について書きたいと思います。 これはGKEのSecretを安全にかつ手軽に作成できるようにしたツールになります。 OSSになっているので皆さんのコントリビューションをお待ちしています。 この記事は５月始めに書こうとしましたが、書く内容をどうするかを考えている内に６月を過ぎてしまっていました。笑 AI・機械学習チームのサービスの特徴 Secretの管理方法の検討 berglasについて berglas on GKE 1. Webhookの可用性 2. IAMポリシーの複雑さ berglas-secret-controller 1. berglas-
Workload Identityを使用して、AWS環境からGoogle Cloudリソースを作成する - NRIネットコムBlog
こんにちは、上野です。 今回はGoogle Cloud関連の内容です。みなさまGoogle CloudのリソースをTerraformなどのIaCでデプロイする場合、どのように実行されていますか？ AWSがメイン処理＋Google Cloud（BigQueryなど一部）という構成を取ることがあり、AWS側でデプロイ管理もしようとすることも我々の現場では多いです。 Google CloudのリソースをAWSからデプロイする場合、Google Cloud側にサービスアカウント＋キーを作成してそれを使用することもあるかと思います。 ただ、この場合永続的なキー情報になるため、この漏えいが心配になります。 Workload Identity 連携を使用すると、永続的なキーを使用せずAWSからアクセスできるとのことなので、今回はそれを試してみます。次のような構成イメージです。 AWS 側のIAM Rol
Next.jsアプリをVercelからGoogle Cloudに移行した話
ZennではフロントエンドにNext.jsを使っています。もともとはVercelで動かしていたのですが、2021年3月にGoogle Cloudに移行しました。今回は移行を決めた理由や、具体的な構成、移行作業などについて書きたいと思います。 なぜ移行したのか Next.jsのデプロイ先としてVercelは圧倒的に優れています。ISRやImage OptimizationといったNext.jsの強力な機能をサーバー側の追加設定なしで使用できますし、CDNでの静的ファイルのキャッシュなども特に意識しなくてもいい感じにやってくれます。 Vercel以外にデプロイするとなると、Next.jsの一部の機能がうまく動かなかったり、パフォーマンス・チューニングを自分で頑張る必要があったりと自分で面倒を見なければならない部分が多くなります。 しかし、Zennのケースでは以下のような理由からVercelから
デザインパターン - Google Cloud のソリューション
ウェブサイト リニューアルおよび移行のお知らせ 2022 年 7 月 Google Cloud Solution Design Pattern のウェブサイトはリニューアルを行い、以下に移行いたしました。より使いやすくなっておりますので、これまで以上にご活用いただけますと幸いです。 gc-solution-design-pattern.jp ソリューション デザインパターン とは ソリューション デザインパターンでは、 ワークロードごとに Google Cloud のアーキテクチャを 2 つの観点でまとめています。 1 つ目は、様々な業界で利用できる共通のソリューション デザインパターンとして「エンタープライズ向けの組織、 IAM、請求管理」、「インフラストラクチャとマイグレーション」、「アプリケーションおよびデータベースのモダナイゼーション」などを用意しています。 2 つ目は、ゲーム業界
Online Diagram, Flowchart Maker | CloudSkew
CloudSkew is an online diagram & flowchart editor. You don't have to install any software. Just login and start drawing! Icons for AWS, Azure, GCP, Kubernetes, CNCF, Alibaba Cloud, IBM Cloud, Oracle Cloud (OCI) and more are already available in the app. You don't have to search for & download the symbols separately.
GoogleがBigQueryを安価に提供できる理由は、Borgによる大規模分散コンテナ環境があるから
GoogleがBigQueryを安価に提供できる理由は、Borgによる大規模分散コンテナ環境があるから いまから6年前の2014年、当時ようやくDockerコンテナが世の中に知られるようになってきた頃、Googleはすでに社内のすべてのソフトウェアをコンテナ化しており、毎週20億個ものコンテナをクラウド上で起動していると発表し、多くのエンジニアを驚かせました。 この大規模なコンテナの制御、すなわちオーケストレーションを行っていたのが同社内で「Borg」と呼ばれるソフトウェアです。 そしてKubernetesはこのBorgを基に、Googleがオープンソース化したコンテナオーケストレーションソフトウェアだとされています。 Borgの大規模分散コンテナ基盤でBigQueryが成立する このBorgによる大規模分散コンテナ基盤があるからこそ、BigQueryが安価に提供できるのだと、Google
AWS Lambda からサービスアカウントで Google APIs を叩くまでにやったこと | DevelopersIO
コンサルティング部の西野です。 AWS Lambda からサービスアカウントを使用して Google APIs を叩く機会がありましたので、その手順を紹介します。 やりたいこと G Suite ドメイン内のユーザーによって Google Drive 上に保存されたファイルの名称を AWS Lambda 経由で取得することをゴールとします。 構成図 server-to-server (Lambda to Google API) で API をコールするためサービスアカウントを用いる Using OAuth 2.0 for Server to Server Applications AWS リージョンはアジアパシフィック（東京）/ ap-northeast-1 を使用 API コール用のサービスアカウントキーを SSM Parameter Store に SecureString として保存す
よく使うgcloudコマンドたち - Qiita
一般 自分のプロジェクト一覧を表示 gcloud projects list cloud sdkのプロパティを見る gcloud config list プロジェクト切り替え gcloud config set project <your-project-id> GCE インスタンス一覧を見る gcloud compute instances list インスタンスの作成(centos-7で) gcloud compute instances create <your-instance-name> --project <your-project-name> --image-family centos-7 使用可能なimage一覧を見る gcloud compute images list インスタンスの起動・停止 gcloud compute instances start <your-i
Google Cloud Platformを社内プロキシ環境で使う - Qiita
gcloud config set proxy/address proxy.local gcloud config set proxy/port 8080 gcloud config set proxy/username xxx gcloud config set proxy/password password gcloud config set proxy/type http_no_tunnel proxy/typeはhttp, http_no_tunnel, socks4, socks5と指定できるので、うまく繋がらない場合は指定して試してみてください。 bq BigQueryを使う際にも設定が必要です。 gcloudと同様に環境変数を設定してればBigQueryのbqコマンドも使えます。 kubectl GKEでKubernetes使いますよね。 kubectlも環境変数設定してれば
AWSとGCPの一生無料枠を活用する - Qiita
はじめに AWSとGCPは、登録後に一定期間（一定量）の無料利用権をもらえますが それとは別にいつまでも無料で利用できるサービスがあります。 AWS クラウド無料利用枠 - 無期限無料 GCPの無料枠 - Always Free プロダクト その中から個人で開発する上で使えそうなサービスの紹介や、 簡単な（本当に簡単な）比較などをまとめてみたいと思います。 ※無料対象のサービスは時々変更1があります。上のリンク先に書いてあるのが最新の正しい情報なのでご参照ください。 （なので、一生というのはちょっと言い過ぎです。。。） ※実際に運用すると通信等の料金が発生したりで月に数ドル程度かかったりします。ほんとに完全無料希望の人は詳しくご確認ください。 所感で個人開発に使えそうなものを紹介していくので無料サービス全部の網羅はしません。（できません） また、AWSとGCPどっちが良いとかではなくどっち
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google Cloud Skills Boost
GCP連載2021を始めます | フューチャー技術ブログ
google-cloud-jp – Medium
https://cloudonair.withgoogle.com/japan