Apache Zeppelin入門 | Hadoop Advent Calendar 2016 #19 | DevelopersIO
こんにちは、小澤です。 この記事はHadoop Advent Calendar 19日目のものとなります。 1人でHadoopの話をする Advent Calendar 2016 - Qiita Hadoop Advent Calendar 2016 ｜ シリーズ ｜ Developers.IO 前回はSparkのMLlibについて紹介させていただきました。 今回はApache Zeppelinというものを紹介したいと思います。 Zeppelinとは ブラウザ上でプログラムをインタラクティブに記述できるノートブックというものを作成するツールの一種です。 有名なところではJupyter notebook(IPython notebook)があるかと思いますが、それと似たツールだと想像していただければと思います。 導入 今回は簡単な方法として、Hortonworksさんが提供するHDPのsan
Apache Flink + Kafka + Zeppelin 連携でアドホックなストリーミング分析
前回、Apache FlinkとはでFlinkの概要に触れたのですが、今回は実践的にkafkaと連携させ、Apache Zeppelinでアドホックに分析してみます。 Zeppelinを使うのは、単純に、jar作って実行するのが面倒だからです(^_-)-☆ 概要 fluentdでデータを収集し、Kafkaにデータを送ります。 Zeppelin上のnotebookからflinkの集計ジョブを実行します。 flinkジョブはKafkaに集約されたストリーミング・データを集計します。 というわけでfluentd, Kafkaをインストールしていきます。 ※ この記事ではCentOS 6.7 Finalを使います。またサーバ上ではrootで作業しています。 ※ また、jdkはopenJDKの1.8を使用しています。 fluentd, Kafkaインストール この記事ではfluentdとKafkaを
Zeppelin project
2013, ZEPL (formerly known as NFLabs) started Zeppelin project here. 2014-12-23, Zeppelin project became an incubation project in Apache Software Foundation. 2016-06-18, Zeppelin project graduated incubation and became a Top Level Project in Apache Software Foundation. Please visit zeppelin.apache.org to see the official Apache Zeppelin website. Click and launch a Live Demo! 2020, Creators of Zepp
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
