ブックマーク / sekaie.hatenablog.com (1)

  • 爽快!分析基盤の紹介 #6 : batch の cron を azkaban に移行した話 - sekaie engineers' blog

    はじめに おはようございますこんにちはこんばんわ。 健康診断で身長が 1cm 伸びてました。佐々木です(体重は 10kg 増えてました) 今日は cron を azkaban に移行した話をしようかと思います。 今までの batch 管理 弊社の分析基盤の batch の管理は crontab で管理していました。 というのも、分析基盤が出来立てということもあって batch の数も依存も少なく crontab で特に問題がなかったからです。 しかし最近は社内利用者も増えてきて batch がコケてて、見えるべき数字が見えなかったりとか影響もそれなりに出てきたのでちゃんと batch を管理しようと思い立ったのが最近の話です。 そこでジョブ管理ツールを導入しようと試みました。 選定 ジョブ管理ツールもたくさんあるのでどのツールを使うか選ぶところから始まりました。 今回の選定基準は以下のとお

    爽快!分析基盤の紹介 #6 : batch の cron を azkaban に移行した話 - sekaie engineers' blog
    kingqoo3
    kingqoo3 2016/05/18
  • 1