Server-Sent Events を複数パターンで実装して理解を試みる
Server-Sent Events (SSE) 目新しい技術というわけではありませんが、最近 Server-Sent Events (SSE) について言及する記事をよく見かけます。 何番煎じかはわかりませんが、個人的に興味があることと、正直触ってみたことがなかったので、コードを書きつつ調べてみました。 ※本記事で登場するサンプルコードは次のリポジトリで公開しています。 SSE とは SSE 自体を解説する記事は無数に存在するため詳細な説明は割愛しますが、簡単に言うと、サーバーからクライアントへ一方向の Push 通信を行うための仕組みです。 MDN にもページが存在するため、参考になります。 独自プロトコルを必要とせず、HTTP/1.1 でも動作するのも特徴です。 SSE の歴史 wikipedia に SSE に関するページが存在し、次のような記述があります。 SSE メカニズムは、
GitHub - isaacs/minipass: A stream implementation that does more by doing less
A very minimal implementation of a PassThrough stream It's very fast for objects, strings, and buffers. Supports pipe()ing (including multi-pipe() and backpressure transmission), buffering data until either a data event handler or pipe() is added (so you don't lose the first chunk), and most other cases where PassThrough is a good idea. There is a read() method, but it's much more efficient to con
WebRTC を利用した配信の現実
超低遅延、高画質な配信を実現するための選択肢の一つとして WebRTC があります。 ただ WebRTC はもともと少人数で双方向の配信を前提としているため、スケールしないというのが一般的な認識です。 せっかくなので WebRTC サーバを開発・販売している立場から WebRTC を利用した配信の現実がどの程度なのかを書いていこうと思います。 P2P モデルまずは WebRTC といえば P2P なので、WebRTC の P2P 利用についてお話する必要があります。 WebRTC の P2P 利用は、配信者が視聴者分の変換を行うという負担があることから、最大でも 10 名程度までしか配信できません。 さらに、何より配信者の PC 負荷がとても高くなるため、採用は趣味のページまででしょう。 ビジネスで P2P を配信に利用するのはとても現実的ではありません。
MPEG-DASHによるリニア型配信 / Linear broadcasting by MPEG-DASH on AbemaTV
2017/10/22 AbemaTV Developer Conference 2017 http://developer.abema.io/2017/ ・MPEG-DASHの基礎 ・AbemaTVのリニア型配信 ・配信品質の管理 1. MPEG-DASHによるリニア型配信 AbemaTV Developer Conference 2017 Yusei YAMANAKA 2. 自己紹介 3. 山中勇成 @toriimiyukki 株式会社サイバーエージェント 2017年新卒 株式会社AbemaTV サーバサイドエンジニア 配信チーム (負荷対策チーム) 4. 「中3で初めて生放送サービスを作った」AbemaTVで働く最年少エンジニアとは？ https://www.wantedly.com/companies/abema/post_articles/64961 5. 本日のアジェンダ ・MP
AbemaTV Developer Conference 2017 に行ってきたメモ #abematv_dev - console.lealog();
AbemaTV Developer Conference 2017 - connpass dotsっていつの間に名前変わってたんや・・！ AbemaTVを支えるGoogle Cloud Platform by Google Platform Japan 福田潔様 はじめに GCPとかG SuiteとかあわせてGoogle Cloudっていってる それを日本で広めるための会社です AbematTVで使ってる概要を紹介 GCPはこの5年間でサービスも増えた AbemaTV on GCP クライアント <-> Akamai <-> GCP GCPの領域では最初にGCLBがいる 中はコンテナ、GKE上で動かしてる App Engine Container Engine(GKE) <- コレ Compute Engine GKE Google Kubernetes Engine Dockerもk8s
社内勉強会で HLS と Key frame について改めて解説した | Hori Blog
チーム全体のスキルアップのため、ネット生放送において超重要な HLS と Key frame について改めて解説してみました。 非エンジニア職を対象とした資料なのでそれなりに入門編としてわかりやすくできたんじゃないかなーと思っております。 内容 10 分（ちょい）でわかる FRESH! 動画の勘所 と題し、 HLS とは何か、なぜ使うのかの解説と、遅延などへの影響が大きい Key frame とはなんぞや、について解説しました。 非エンジニア職でも概要がつかめるよう意識しました。 なぜやったのか 生放送サービスを運営するにあたって、やはり動画に対する基礎的な知識は非エンジニア職でも必要になってきます。 特に遅延が起きたり画質が乱れたり、現場での対応はもちろんですが営業などする際の説得力にも違いが出てくると思います。 幸いにも、普段から何かと積極的にこれってどういうことなの？と質問してくれる
最近のストリーム処理事情振り返り
2. @kimutansk 自己紹介 •Kimura, Sotaro(@kimutansk) – ドワンゴでデータエンジニアやってます •データ分析基盤の管理 •データ分析に必要な各種ETLパイプライン構築 •生データを集計したデータマートの設計構築 •データフォーマット、内容等の設計 etc... – 好きな技術分野 •ストリーム処理（主にJVM上） •分散システム •実装言語：Scala, Go – 好きなOSSプロダクト •Apache Kafka •Apache Beam •Apache NiFi etc... 3. @kimutansk アジェンダ •ストリーム処理とは何か？ •ストリーム処理システム構成の変遷 – バッチと並列でデータ処理を実行 – 単体でデータ処理を実行 – データ処理パイプラインとして抽象化し、実行 •最近語られているストリーム処理の概念 – バッチ処理とス
stream b/w node.js and whatwg // Speaker Deck
Talk about Stream API difference between node.js and whatwg at #tng11 2016/08/08
Handson with Twitter Heron
This document provides an overview of Twitter Heron, an open source real-time streaming engine developed by Twitter to replace Storm. It describes Heron's design goals of improved performance, predictability, manageability and developer productivity. The architecture is outlined, including task isolation for easier debugging. Back pressure is discussed as a way to handle stragglers. Load shedding
HTTP Live Streaming(HLS)形式の動画をAWS(Amazon Elastic Transcoder、S3、CloudFront)で配信 - 迎 昭宏のブログ
Apple仕様のHTTP Live Streaming（HLS）をアダプティブ配信する環境をAWS（Amazon Elastic Transcoder→S3→CloudFront）で構築して、配信最適化できるか試してみた。 ※Akamaiでの配信方法は以下 動画配信技術 その1 - HTTP Live Streaming(HLS) - Akamai Japan Blog 動画配信技術 その3 - Universal Streaming(HDS/HLS) - Akamai Japan Blog HTTP Live Streamingとは、容量の大きい動画ファイルを10秒ごとに分割して、読み込みながらでも再生できる。特別なストリーミングサーバを必要とせず、通常のWEBサーバで配信ができるのも利点。iOS、Androidともに対応端末が幅広い。 Apple公式の資料 「特別なサーバソフトを使用し
Kafkaを活用するためのストリーム処理の基本
1. Kafkaを活用するための ストリーム処理の基本 2016/05/31 Apache Kafka Meetup Japan #1 木村宗太郎（@kimutansk） https://www.flickr.com/photos/gruenewiese/13194312524 2. 自己紹介 • 木村 宗太郎（Sotaro Kimura） • ビッグデータ界隈に生息する何でも屋 • バックエンドからフロントエンド、技術検証から運用、 ドキュメント書きまで色々 • Kafkaとの出会いは3年程前に Stormとの連携を試したのがキッカケ。 • だが、その後大規模なものをやる機会には恵まれず... • 自宅サーバには常に入っています。 • Twitter他 : @kimutansk 1
Introduction to Kafka Streams
Kafka Streams is a new stream processing library natively integrated with Kafka. It has a very low barrier to entry, easy operationalization, and a natural DSL for writing stream processing applications. As such it is the most convenient yet scalable option to analyze, transform, or otherwise process data that is backed by Kafka. We will provide the audience with an overview of Kafka Streams inclu
HTTP Live Streaming対応のライブ動画配信サーバーを構築する - 低空飛行の航空日誌
概要 PCだけでなく、iOS・Android（4.0以降）端末にも対応できる動画配信サーバーを構築する方法です。 モバイルデバイスでは特別なアプリを入れることなく、配信されている動画を見ることが可能です。 前提条件 OS：CentOS 6.6 apacheが既にWebサーバーとして稼動しているものとする apacheの公開ルートディレクトリ：/home/www/ 配信ページのディレクトリ：/home/www/live nginx バージョン：1.6.3 (stable release) nginx インストール先：/usr/local/nginx HTML5プレイヤー：Flowplayer HTML5 注意点 自宅サーバーでは、回線の上り帯域使用量規制（およそ30GB/月）があるため、回線がいくら好条件でもお勧めできません。 運営者は自分自身のため、何を配信しても強制停止はされませんが、配
Javaコレクションフレームワークの比較 (JDK8/GS Collections/Guava) - Programming Diary.
はじめに Java Day Tokyo 2015とJJUG CCC 2015 Springで紹介されていたGS Collectionsを使用してみました。実例を用いてJava8のStream APIやGuavaの使用方法と比較します。 環境 JDK 1.8.0_25 GS Collections 6.1.0 Guava 18.0 JUnit 4.8.1 問題設定 社員のリストから営業部に所属する社員を抽出し、社員番号の昇順で社員名を取得する 社員のリストから部署ごとの社員数を求める ※『Javaエンジニア養成読本』特集２の第３章「Stream API を使いこなすために」の例を参考にしました。 社員 public class Employee { private int id; // 社員番号 private String name; // 名前 private Dept dept; //
Streams 仕様読んだ - Qiita
Streams 雑感 WHATWG Streams の仕様を読みました。 雑感です。 第1印象は「常識に囚われてはいけないのですね!」でした。 仕様は ES6 で実装してから書いてるようで、既に動く実装があります。 ES6 Classes を使って書かれており、主要なクラスはReadableStream, ReadableStreamReader, WritableStreamの3つ。 Promise まず特筆すべき事は、 Streams はイベントを一切持たないという点です。 ワオ。 従来の JavaScript はイベント駆動です。DOM も XHR も WebSockets も EventSource もイベントを通知します。しかし、この新しい Streams はaddEventListenerを持っていません。代わりに、Promiseをイベントのように使っています。 これにはちゃん
Stream API がブラウザにやってくる - Block Rockin’ Codes
Intro 今日は、フロントのプログラミングスタイルに、にまた一つ大きな変化をもたらすであろう Stream という API についてです。 この仕様は現時点でまだ策定中であるため、 API は変更される恐れがある点にご注意ください。 Stream API 以前 「Node.js の Stream API で「データの流れ」を扱う方法」 という記事を書きましたが、簡単に言うとあれがブラウザにもやってくるという話です。 非同期処理おさらい もう何度も書いた話なので駆け足で。 JS はシングルスレッドでイベント駆動な世界なので、何をするにも非同期であり、コールバックを登録することで完了した結果を受け取る API が基本です。 これは、ブラウザの DOM の API でも、 Node.js でも共通しています。 概念を疑似コードで書くと以下のような感じです。 console.log('1');
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - globocom/m3u8: Python m3u8 Parser for HTTP Live Streaming (HLS) Transmissions
動画配信サイトを支える技術 Shinjuku.rb #39
A dive into akka streams: from the basics to a real-world scenario