delete-insertは、例えば日次処理なら日付でがっつり消したり、それが難しければ集計ジョブIDみたいなものを持ったりする必要がある。別ジョブにしてます。

katzchangkatzchang のブックマーク 2015/06/18 06:34

その他

このブックマークにはスターがありません。
最初のスターをつけてみよう!

バッチ処理、ジョブ管理について書いてみる - wyukawa's diary

    僕はHive, Pythonでバッチ処理を書いてAzkabanでジョブ管理するシステムを構築、運用した経験が2年ほどあるので今日はバッチ処理、ジョブ管理について書いてみようと思います。 僕の経験上Hadoop特有の部分、例え...

    \ コメントが サクサク読める アプリです /

    • App Storeからダウンロード
    • Google Playで手に入れよう