Datastreamの検索結果1 - 6 件 / 6件

• あとで読む

  データ分析基盤まとめ（随時更新）

  • 298 users
  • zenn.dev/yuichi_dev
  • テクノロジー
  • 2024/03/15

  はじめに データ分析基盤の資料を力尽きるまで追記していきます。 構成図にあるアイコンや記事の内容から技術要素を調べて記載していますが、不明分は未記載にしています。修正のコメント頂ければ助かります。 あと、この記事追加してっていう要望も歓迎いたします。 テンプレート 記事公開日 : 会社名（サービス名） データソース : データ処理 : アウトプット : 画像 URL 2025年 2024/03/14 : 株式会社エス・エム・エス（カイポケ） データソース : Amazon Aurora データ処理 : Datastream、BigQuery、dbt アウトプット : Looker Studio 2024/03/12 : 株式会社マイナビ データソース : SQL Server、Amazon S3 データ処理 : Embulk、Amazon MWAA、Apache Airflow、Snowf

  • データ分析
  • あとで読む
  • データ
  • 分析
  • データ基盤
  • 基盤
  • BigQuery
  • まとめ
  • 統計
  • AWS

  
• あとで読む

  “わずか10分”で「負荷試験環境」の構築が可能に　クイックにチェックできる状況をサクッと作れる、Linode活用法

  • 216 users
  • logmi.jp
  • テクノロジー
  • 2022/12/28

  StackScript、k8s、Terraformを使って、Linodeで負荷試験環境を自動で構築する方法について、アカマイ・テクノロジーズの岡本英輝氏と佐藤裕行氏が、実際のデモを交えて紹介しました。後半はLinodeを使った負荷試験のデモとQ&Aについて。前半はこちら。 Linodeのメリットが得られやすいユースケースとは？ 佐藤裕行氏（以下、佐藤）：後半は、Linodeのユースケースについて、少し岡本さんと話を進めていきたいと思うんですけども。今回はアプリケーションの負荷試験にフォーカスして、デモなども見せていきます。 その前に、負荷試験以外のサービスでいうと、こういうのに向いているとか、こういうのに向いてそうなところって、なにか感覚として持ってたりしますか？ 岡本英輝氏（以下、岡本）：前半に続いて、ちょっと転送量コストの話ばっかりになってしまうんですけど、やはりアウトバウンド転送量を

  • 負荷テスト
  • あとで読む
  • パフォーマンス
  • インフラ
  • test
  • kubernetes
  • performance
  • webサービス
  • terraform
  • 環境

  
• あとで読む

  BigQueryへMySQLやPostgreSQLから直接ニアリアルタイムでレプリケーション可能に。「Datastream for BigQuery」登場

  • 192 users
  • www.publickey1.jp
  • テクノロジー
  • 2022/09/20

  BigQueryへMySQLやPostgreSQLから直接ニアリアルタイムでレプリケーション可能に。「Datastream for BigQuery」登場 Google Cloudは、BigQueryに対してMySQLやPostgreSQL、Oracle Databaseからニアリアルタイムで直接データのレプリケーションを可能にする新サービス「Datastream for BigQuery」をプレビューリリースしました。 オンプレミスやクラウドで稼働するMySQLやPostgreSQL、Oracle DatabaseでのOLTPによるデータ操作が、ETLツールなどを挟むことなくほぼリアルタイムでBigQueryに反映されるため、プライマリとなるデータベースのOLTP処理に負荷をかけることなく並行してBigQueryによる大規模データの分析処理が容易になります。 To stay compet

  • bigquery
  • あとで読む
  • MySQL
  • gcp
  • postgresql
  • google
  • データベース
  • DB
  • database

  
• あとで読む

  次世代データ基盤：データレイクハウスを Google Cloud で実現する

  • 151 users
  • zenn.dev/cloud_ace
  • テクノロジー
  • 2024/02/22

  はじめに こんにちは、クラウドエース データソリューション部の松本です。 普段はデータ基盤や MLOps の構築をしたり、Google Cloud 認定トレーナーとしてトレーニングを提供しております。また、昨年は Google Cloud Partner Top Engineer 2024 に選出されました。今年も Goodle Cloud 界隈を盛り上げていけるよう頑張っていきたいと思います。 クラウドエース データソリューション部 について クラウドエースのITエンジニアリングを担う システム開発統括部 の中で、特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門とするのが データソリューション部 です。 弊社では、新たに仲間に加わってくださる方を募集しています。もし、ご興味があれば エントリー をお待ちしております！ 今回は、次世代データ基盤であるデ

  • BigQuery
  • あとで読む
  • gcp
  • データ
  • cloud
  • Google Cloud
  • google
  • 分析
  • クラウド
  • アーキテクチャ

  
• あとで読む

  GCPで行動ログ基盤 を開発している話

  • 121 users
  • speakerdeck.com/kaito2
  • テクノロジー
  • 2019/09/30

  Google Cloud Next '24 Recap in ZOZO Datastreamを使用したリアルタイムデータストリーミングの紹介 / realtime datastreaming with Datastream

  • gcp
  • あとで読む
  • データ基盤
  • ログ
  • 開発
  • slide

  
• あとで読む

  AWSエンジニアから見たGCP(データ分析編)

  • 50 users
  • techblog.gmo-ap.jp
  • テクノロジー
  • 2023/05/30

  こんにちは、GMOアドマーケティング インフラ開発部のhakumaiです。前回の記事「AWS SAPを取得したら視野が広がった話」を読んでいただいた方々、ありがとうございます。今回のテーマは「AWSエンジニアから見たGCP」第2弾として、代表的なGCPのコンピューティング系サービスについてAWSと比較し感じた点についてお話いたします。 (第1弾の記事はこちら↓)IaaSCompute EngineAWSではEC2に相当するサービス。各種インスタンスタイプや提供OSイメージ、インスタンス向けのストレージ機能、オートスケール機能など、インスタンスのアーキテ... DWH BigQuery BigQueryはフルマネージドなサーバレスDWHサービスで、Googleが開発した大規模データ向けの分散システムであるDremelを基にしておりSQLクエリを使用して大規模データの分析を行うことができる。さ

  • GCP
  • aws
  • あとで読む
  • 分析
  • データ