Dataflowをオートスケールさせてみる - Qiitaこれは、Google Cloud PlatformのAdvent Calendar の20日目のエントリーです。 Cloud Dataflowとは？ 概念はこちらを参照してください。 要は、分散処理フレームワーク＋実行環境（onGCP）みたいなものです。 イマイチ事例も無いし情報も少ないのですが、個人的には可能性を感じていてワクワクしてます。 Dataproc (Hadoop)より優れている（と思う）ところ 分散処理フレームワークといえば、Hadoopが代表的です。 GCPでもHadoopサービスであるDataprocを出しているので、簡単に違いを考えてみました。 そもそもDataprocとは？ Hadoopクラスタを自動構築するサービス。AWSで言うところのEMR。 Click to Deployで作ることもできますが、これを使えばクラスタとして管理ができるので、ノード数の指定や増減、プ
