Airbnbの「Airflow」を試すこんにちは。最近pythonと戯れているmatsです。 6月の頭にこんなリリースがありました。 今回はこの「Airflow」を試してみようかと思います。 Airflowとは 「Airflow」はAirbnbがオープンソースとして公開したワークフロー管理プラットフォームです。 データパイプラインを規模に応じてタイムリーにオーサリング、スケジューリング、モニタリングすることができ、過去数年間で爆発的に成長したAirbnbにとっては不可欠な存在とのこと。 ソースコード： https://github.com/airbnb/airflow/ ドキュメント： http://pythonhosted.org/airflow/ Airflowのインストール Airflowはpython製で2.7系のみの対応です。今回はAmazon Linuxにインストールを行いました。 準備 コンパイルに必要なパッケー
