ワークフローエンジンDigDagでDockerを使ってみる(追記：6/28) - techium
ワークフローエンジンのDigDagではワークフローを動かす環境をDockerにすることが可能とのことです。 そのためDockerで環境をワークフローを動かすときに構築するため、過去の設定情報などをクリアすることなく動作させ得ることができるため、ワークフローを書くのが非常に楽になります。 Dockerを使った方法についてご紹介します。 ただし、まだまだ開発中のようできちんと動きませんでした。 Dockerの指定(コンテナの環境構築なし) DigDagでDockerを指定するには次のように行います。 今回の例では下記のような構成で実行するものとします。 . ├── digdag-docker.dig └── tasks └── shell_sample.sh [digdag-docker.dig] timezone: UTC _export: docker: image: ubuntu:14.
「Digdag」を使って依存関係のあるタスクをコードベースで管理する - タダケンのEnjoy Tech
こんにちは! タダケン(@tadaken3)です。 会社で使っている分析基盤に、Digdagというワークフローエンジンを導入しました。digdagはとても魅力的なツールで、ぜひより多くの人にも使ってほしいなと思い、Digdagの導入方法をまとめてみました。 ところで、ボクはディグダといえば、ポケモンを思い出します。 Digdagとは Digdagをインストールする digファイルを作成してワークフローを記述する ワークフローを実行する まとめ 参考URL 読者登録をお願いします！ Digdagとは Digdagは複雑なタスクを実行するためのTresure Dataが開発したOSSのワークフローエンジンです。 例えば、 外部APIからデータを取得する 取得したデータを成形する データをデータベースにインサートする みたいな処理を順番に実行したいとします。 cronで実行することもできますが、
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
