超高速のPostgreSQLとしてGreenplumを気軽に使う

はじめに ビッグデータ、データサイエンスという言葉の流行を大きく後押ししたのは大規模なスケールアウト、分散処理を可能としたHadoopの存在です。しかしデータサイエンティストは日々のデータ処理作業において必ずしも複数台のマシンを必要とするような大規模な処理ばかり行っているわけではありません。自身の開発用ワークステーション1台で完結するような処理も多数存在します。 2016年ではもはや当たり前ですが、多くのワークステーションはマルチコアのCPUを搭載しており、CPUがボトルネックになるようなデータ処理をマルチコアを活かして並列処理する重要性は高まっています。しかし、意外に多くのソフトウェアが、この当たり前に期待される「マルチコアを活かして単一ワークステーション上で高速並列処理すること」が出来ていません。 この悩みから、筆者は過去にテキストデータ処理を簡単にマルチコア対応にするJavaフレーム

[takehikom]

『4ノード構成なので1/4程度の時間で完結することは期待していましたが、まさかの15倍速です』

[kuchitama]

プロセスwwwwwwww

[PowerEdge]

スレーブだけGreenplum使うみたいなことできたらいいのに

[lizy]

psqlコマンドとかほぼ同じものがあるのか、あとはPostGISが動けば……と思ったら多少機能が制限されてるけどあるのか

[tmatsuu]

マルチコア対応。ほっほー！

[iR3]

ふむふむ超高速のPostgreSQLとしての“Greenplum”ね

[KoshianX]

ほお、こんなものが。PostgreSQL からの移行も簡単なのかな。

[shiwork]

"超高速のPostgreSQLとしてGreenplumを気軽に使う - WAF Tech Blog ｜ クラウド型 WAFサービス Scutum 【スキュータム】" 面白そう

[sinzysinzy]

spark 分散 SQL DB

[kaputte]

試してみたいな

[habuakihiro]

これはいいかも

[theatrical]

Postgres baseなら使い心地も近そうだし良さそう