Facebook、分散SQLエンジン「Presto」公開。大規模データをMapReduce/Hiveの10倍効率よく処理すると

Facebookは、数ペタバイト級の大規模データに対しても、対話的にアドホックな問い合わせを可能にする分散SQLエンジン「Presto」を、オープンソースで公開しました。 PrestoはFacebook社内で大規模データの分析のために開発され、すでに同社社内使われているもの。 FacebookはPrestoを開発した背景として、大量のデータをHadoop/HDFSベースで保存したものの、バッチ指向のMapReduceではなく、リアルタイム性に優れた処理が必要になったためだと、次のように説明しています。 Facebook’s warehouse data is stored in a few large Hadoop/HDFS-based clusters. Hadoop MapReduce [2] and Hive are designed for large-scale, reliabl

[pons_superus]

速そうな名前。

[hycon]

Operaのレンダリングエンジンと名前被ってるが…

[nobusue]

ぱねぇ

[uzuki-first]

見逃してた。

[mfham]

分散SQLエンジン

[nilab]

Facebook、分散SQLエンジン「Presto」公開。大規模データをMapReduce/Hiveの10倍効率よく処理すると － Publickey

[moomindani]

MapReduce/Hiveよりもリアルタイム処理に向いている、と。

[stibbar]

http://sourceforge.jp/magazine/13/11/08/064000

[Kureduki_Maari]

.｡oO(！？ #Opera ) Facebook、分散SQLエンジン「Presto」公開。大規模データをMapReduce/Hiveの10倍効率よく処理すると via @Digg

[ShineSpark]

Operaの話じゃなかった

[fukuiretu]

AWSでサポートしてくれないかなー

[stealthinu]

なぜに「Presto」って名前なんだよ…

[kana321]

Publickey

[rhosoi]

へー

[youkoseki]

よく分からないけど愛用してます。

[mano-junki]

hadoop facebook sql distributed database mapreduce bigdata

[py0n]

社内でhiveが広まったらこれだ。

[mee935]

スタッフのみなさんどうぞ。もう知ってたかもしれんけど。

[akulog]

バックエンド頑張ってるんだな。そろそろフロントエンド頑張ろうな。

[Jxck]

fmfm

[saqqu]

SQLはビッグデータでもこの先生きのこるのか

[akuwano]

"開発初期に、データがさまざまなデータストア、例えばHDFSやHBase、FacebookのNews Feed Backendなどに分散していたためPrestoは当初からデータストアを抽象化するプラガブルな構造を採用した"

[fake-jizo]

Facebookは、数ペタバイト級の大規模データに対しても、対話的にアドホックな問い合わせを可能にする分散SQLエンジン「Presto」を、オープンソースで公開しました。 Tags: facebook, ifttt via Pocket

[ritena]

使ってみたい

[inamem9999]

N:3、H:8、A:8で階段譜面が特徴の久保田修曲とは関係無かった

[htgc]

後で調べる

[onagatani]

仕事でつかってみたいけど、ビッグデータ扱うことないわー

[tmtms]

ほぉ、面白そう

[coolworld]

後で公式見る

[koyancya]

面白そう。触ってみるか