Luigi で作成するワークフローの再利用性・メンテナンス性を高めるために - Qiita

この記事について この記事では、 Python 上で動作するワークフロー管理フレームワーク Luigi をデータ分析に利用した際の経験を踏まえて、このようにワークフローを書けばメンテナンスが楽になるのではないか？ と考えたやり方を述べています。 以下で述べていくことを不適当だと考えられる方もいらっしゃるかもしれませんが、そもそもこういったことがあまり議論されていないように見受けらますので、議論の種にでもなればと考えています。 Luigi が如何なるツールか、どういった利点があるのか、基本的な使い方はどういったものなのか、といったことについては触れません。Qiita の中でも既に記事を書かれている方がいらっしゃいますので、そちらをご参照ください(データフロー制御フレームワークLuigiを使ってビッグデータ解析をする、Luigi によるワークフロー管理など)。 Parameter の使い方 タ