Digdagによる大規模データ処理の自動化とエラー処理

2. Sadayuki Furuhashi A founder of Treasure Data, Inc. located in Silicon Valley. OSS projects I founded: An open-source hacker. Github: @frsyuki 3. What’s workload automation? • あらゆる手作業の自動化 > バッチデータ解析の自動化： • データロード - ETL - JOIN- 集計処理 - レポート生成 - 通知 > メール送信の自動化 • アドレス一覧の取得 - 対象の絞り込み - テンプレートから 本文を生成 - メール送信 - 完了通知 > システム間のデータ連携の自動化 > サーバ・DB・ネットワーク機器の管理やプロビジョニング の自動化 > テスト・デプロイの自動化（CI） 4. 求められる機能 •

[nilab]

「Talk at Workflow Engines Night, Tokyo, Japan」

[zsiarre]

“Top clipped slideTop clipped slide ”

[tmatsuu]

まだdigdag試せてない。取り急ぎアクセスログ解析をdigdagにしてみるか

[codeout]

“Top clipped slideTop clipped slide ”