ワークフローエンジンDigDagのサーバ/クライアント構成を試してみる - techium

ワークフローエンジンというのを知っていますか。 申し訳ないのですが私は全く知りませんでした。 ワークフローエンジンの定義は仕事の流れをツールが回してくれるツールのことが一般的のようです。 幾つかそういったワークフローエンジンがあるようですが今回はTreasure Data社がOSSとして公開し始めたDigDagをご紹介いたします。 DigDagとは 目的は手動でできる仕事をすべて自動化する目的で開発が進められているようです。 そのため用途はタスクを実行した時にエラーが発生した場合にリトライを何回実施するかをyamlに記述しておけば同じタスクを何度も実行できたり、失敗を何度も繰り返したらメールを送信をさせたりなどが実施できるようなことができます。 現在はタスクとして実行できる言語はRuby、ShellScript、Pythonとなりますが拡張性が高いアーキテクチャになっており、プラグインを追

[peketamin]

“127.0.0.1:65432”

[ya--mada]

バッチをまとめて処理するスクリプト書くのとの違いが未だ分かっていない。わざわざJavaまで入れて使うメリットなんだろ、気になるけど

[highfrontier]

スタートアップ・テック ワークフローエンジンDigDagのサーバ/クライアント構成を試してみる