タグ

ブックマーク / gri-blog.hatenablog.com (1)

  • Airbyteを試してみた - GRI Blog

    Open SourceのETL(今のところExtract Transform LoadのうちExtractとLoadメインみたい)ツール、Airbyteを試してみました。TechCrunchでは、オープンソースのデータパイプラインプラットフォームとして紹介されていました。 airbyte.io jp.techcrunch.com 用意されているSourceとDestinationを組み合わせて、スケジュールを実行の設定ができます。差分更新ができるコネクターが限られていたりはしますが、シンプルに散在しているデータをBigQueryってときとかは使えるかもしれません。 GCPで試してみようということで、インストールはこちらの公式ページの手順に忠実にやりました。要はDockerで一発ってことですね。 On GCP (Compute Engine) - Airbyte Documentation

    Airbyteを試してみた - GRI Blog
  • 1