Apahe Airflow tutorial編 Apache Airflowとは 有向非巡回グラフ(DAG)理論を応用したタスク管理システム Apache Airflowでは一連の処理の名称をDAG名とし、処理単位がグラフのノードとなる。 各ノードにtask_idと呼ばれる一意となる名称をつける。 DAGの定義手順は次の2フェーズにわけることができる。 最初のフェーズでは一連の処理に名前をつけ、処理の内容を記述する 次のフェーズで処理群の関係(依存関係)を記述する Apache Airflowのインストール 概要 とりあえずdocker-airflowのtutorialをやってみる docker composeをインストール docker composeが入ってなかったのでdocker composeをいれます $ cd docker-airflow $ ls -la drwxr-xr-x