サクサク読めて、アプリ限定の機能も多数!
delete-insertは、例えば日次処理なら日付でがっつり消したり、それが難しければ集計ジョブIDみたいなものを持ったりする必要がある。別ジョブにしてます。
katzchang のブックマーク 2015/06/18 06:34
バッチ処理、ジョブ管理について書いてみる - wyukawa's diarydelete-insertは、例えば日次処理なら日付でがっつり消したり、それが難しければ集計ジョブIDみたいなものを持ったりする必要がある。別ジョブにしてます。2015/06/18 06:34
このブックマークにはスターがありません。 最初のスターをつけてみよう!
wyukawa.hatenablog.com2015/06/17
僕はHive, Pythonでバッチ処理を書いてAzkabanでジョブ管理するシステムを構築、運用した経験が2年ほどあるので今日はバッチ処理、ジョブ管理について書いてみようと思います。 僕の経験上Hadoop特有の部分、例え...
171 人がブックマーク・15 件のコメント
\ コメントが サクサク読める アプリです /
delete-insertは、例えば日次処理なら日付でがっつり消したり、それが難しければ集計ジョブIDみたいなものを持ったりする必要がある。別ジョブにしてます。
このブックマークにはスターがありません。
最初のスターをつけてみよう!
バッチ処理、ジョブ管理について書いてみる - wyukawa's diary
僕はHive, Pythonでバッチ処理を書いてAzkabanでジョブ管理するシステムを構築、運用した経験が2年ほどあるので今日はバッチ処理、ジョブ管理について書いてみようと思います。 僕の経験上Hadoop特有の部分、例え...
171 人がブックマーク・15 件のコメント
\ コメントが サクサク読める アプリです /