Airflow DAG @ Agari
Workflow Schedulers Workflow schedulers are systems that are responsibile for the periodic execution of workflows in a reliable and scalable manner. Workflow schedulers are pervasive - for instance, any company that has a data warehouse, a specialized database typically used for reporting, uses a workflow scheduler to coordinate nightly data loads into the data warehouse. Of more interest to compa
リアルタイム処理エンジンGearpumpって？ - Qiita
こんにちは、最近Gearpumpという面白そうなプロダクトを教えてもらったので、それについて調べてみようと思います。 参照： http://www.gearpump.io/ http://conferences.oreilly.com/strata/big-data-conference-sg-2015/public/schedule/detail/45109 Gearpumpとは？ Intel発のOSSでリアルタイムなビッグデータストリーム処理エンジンです。 構造としてはDAG構成を持ったグラフをベースとし、それを実行するためのエンジンとなります。 類似の類似のプロダクトにはどのようなものがあるか？ 具体的にGearpumpがビッグデータのプロダクト群の何に対応づけられるかというと、下記の図のとおりとなります。 レイヤとしては実際に処理を実行するためのエンジン部、その中でもストリーム処理
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
