タグ

ブックマーク / zenn.dev/akasan (1)

  • Apache Airflow使ってみた

    今回はApache Airflow(以下、Airflow)について調べてみました。調べようと思った理由としては 以前から名前は知っていたが調べる機会がなかった Google Cloudの勉強をしている中でCloud ComposerがAirflowを使っているということでどんなものか気になっていた からです。今回は格的な調査というよりは、まずはどんなものかについて調べてみようと思います。 Apache Airflowとは? 一言で言ってしまえばワークフロー管理ツールということみたいです。Pythonを使ってワークフローを構成し、スケジューリングを行ったり動作のモニタリングができるツールとなります。 AirflowはWorkflows as codeとして開発されており、この思想はいくつかの利点があるということです(詳細はこちら)。 Dynamic:パイプラインはコードとして実装され、動的

    Apache Airflow使ってみた
    CLSmooth
    CLSmooth 2026/04/29
  • 1