2017/08/04 ストリームデータ処理技術勉強会での発表資料です。
2017/08/04 ストリームデータ処理技術勉強会での発表資料です。
#ScalaMatsuri での発表資料です。
この記事で書いている内容は? ストリーム処理とはそもそも何かからはじまり、必要になる検討ポイントなどの情報を振り返り用にまとめたものです。 あとは、今年個人的にこの分野に影響が大きかったと思ったイベントをまとめています。 他の方へ説明する際のベースとするためにまとめているため、 既にこの分野を知っている方にとっては冗長な内容も多いかもしれませんが、 その場合は適宜読み飛ばしていただけると。 あと、私の他記事からも内容引っ張ってきているのでかぶりはあると思います。 特にGoogleが考えるストリームデータ処理とは?とは目的もかぶっているので相応に被りがあるかと・・・ 出来るだけよく出てくる固有の言葉を最初から使用せずに書いているつもりですが、 何かわかりにくい場所あればコメントいただけるとありがたいです。 「ストリーム処理」とだけ書くと微妙にストリーミング配信等とも混同しやすいですが、 デー
2. Copyright © Acroquest Technology Co., Ltd. All rights reserved. 2 自己紹介 所属 • Acroquest Technology Co., Ltd. • 「働きがいのある会社」(GPTW) 従業員25~99人部門 2年連続1位 主な業務分野 • テクニカルアーキテクト • SEPG • IoTサービス開発 • ビッグデータ処理プラットフォーム 最近の興味 • サーバーレス • DevOps • Elasticsearch 鈴木 貴典 Twitter : @takanorig Qiita : http://qiita.com/takanorig 3. Copyright © Acroquest Technology Co., Ltd. All rights reserved. 3 本日お話する内容 #1 ビッグ
Data Labsについて ユーザー数や売上などを社内横断でサポートする部署です 大きくやることは2つある 1:データという切り口からサービスをサポートする データ分析の専門家もいるので、分析結果をサービスにフィードバックする 2:分析のための新技術の開発 データラボができるまではそれぞれのサービスでデータが作られていたが、この部署ができることで統合的に分析できるようになった サービスとの連携を考えるプランナー、分析を行うアナライザー、開発を行うエンジニアの3種類の役職がある Data Platform LINEやGamesなどのサービスからData Lakeとよばれるものにfluetndなどを使って蓄積されている 分析ツールについては多くはOSSを使用している LINE LIVEでのストリーミング処理について LINE Liveは動画配信サービスです 視聴者数については数秒おきに集計され
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く