GitHub - gazette/core: Build platforms that flexibly mix SQL, batch, and stream processing paradigms
Gazette makes it easy to build platforms that flexibly mix SQL, batch, and millisecond-latency streaming processing paradigms. It enables teams, applications, and analysts to work from a common catalog of data in the way that's most convenient to them. Gazette's core abstraction is a "journal" -- a streaming append log that's represented using regular files in a BLOB store (i.e., S3). The magic of
Data Streaming via GRPC vs MQTT vs
MQTT vs Websockets vs GRPCWhen there is a requirement to stream real time data like GPS and sensor data to cloud server, we have three main options to pick from MQTT, Websockets, GRPC the new guy from Google. But which one should we pick is real tough given the situations and requirements. This article is primarily to brief about the different options and a comparison between each other. Before we
【Raspberry Pi】ストリーミング配信した映像をOpenCVで受け取る - おもちゃラボ
この記事ではRaspberry Piに接続したカメラの映像をストリーミング配信して、その映像をMacやPCで受け取る方法を紹介します。 Raspberry Piからのストリーミング映像はブラウザでも受け取れますが、ここではOpenCVで受け取る方法も合わせて紹介します。 Raspberry Piでストリーミング配信する Raspberry Piに接続したカメラからストリーミング配信するにはmjpg-streamerを使用します。mjpg-streamerのインストール方法は次の記事のとおりです。 qiita.com インストールのコマンドだけこちらにまとめておきます。 $ sudo apt-get install -y cmake libv4l-dev libjpeg-dev imagemagick $ git clone https://github.com/jacksonliam/mj
raspberry Pi + カメラモジュールでストリーミング配信と顔認識 - Elsaの技術日記(徒然なるままに)
今回はラズパイとカメラモジュールを用いてストリーミング配信を行う方法についてまとめたいと思います！！ また、ストリーミング配信をサーバーに送りそこで顔認識とその結果を表示する部分についてもまとめます！！ ■実行環境 ■ラズパイでのストリーミング配信 ■ストリーミング配信された動画から顔認識 ■最後に ■参考 ■実行環境 <ストリーミング配信> ・Raspberry Pi4 ラズベリーパイ 4 コンピューターモデルB 2GB Raspberry Pi 4 ラズパイ 4 TELEC認定取得済み 技適マーク入り 価格:7,478円 (2020/9/13 23:19時点) 感想(0件) ・カメラモジュール(LOGICOOL HDプロ ウェブカム C920) 【エントリーでポイント10倍！（9月11日01:59まで！）】【中古】PCハード ロジクール HDプロ ウェブカム C920n 価格:10,0
HDMI入力をRaspberry Piで駆使する
昨今の衰えることのない技術トレンドに追従すべく、映像配信とかやりたいなーと思っていた2019年。 めっきり時間がなく何もできず、気付けば2020年になっていました。 今年も時間がないだろうなぁと思っていたところ、連日の在宅勤務のおかげで通勤時間がゼロになり、余暇が生まれたので色々やってみることにしました。 お題はHDMI入力で遊ぶ、です。 目次 Open 目次 ビデオ転送プロトコル UVC (USB Video Class) MIPI CSI-2 (MIPI Camera Serial Interface 2) HDMI入力 キャプチャーボード HDMI to MIPI CSI-2 H2C-RPI-B01 HDMI映像入力をみてみる raspivid Gstreamer HDMI映像配信してみる RTMP WebRTC まとめ 参考リンク ビデオ転送プロトコル 早速ですがHDMIから一旦離
gRPCのServer-Streaming RPCを用いたPUSH通知の実現事例 | Fintan
はじめに このドキュメントは、gRPCを用いてサーバからクライアントへのPUSH通知を実現した事例をまとめたものです。 ここでいう PUSH 通知とは、通常のクライアントからサーバへのリクエストではなく、何かしらの契機によりサーバからクライアントへ送信される通知を指します。 例えばチャットツールでよくあるように、誰かのメッセージが入力されたらチャット参加者全員に通知されるというものです。 gRPCを利用してみた事例は現時点でも多く存在しますが、サーバ側からの通知の実現方法を述べた情報は調べた限りでは多くありませんでした。 本ドキュメントは、gRPC での PUSH 通知をどのように実装するのか？、そして、その時の課題にどのようなことがあるのか？という情報を提供することを目的としています。 TL;DR サーバからの PUSH 通知を、gRPC の Server Streaming RPC と
Datastream.io : Open Source Anomaly Detection
We are proud to launch the very first version of our open-source project for Anomaly Detection and Behavioural Profiling on data-streams, datastream.io (dsio on github). We have a long roadmap ahead of us, but, release often and release early, as they say. So here it is — a minimal viable full-stack Python anomaly detector: pip install -e git+https://github.com/MentatInnovations/datastream.io#egg=
gRPCにおける各RPC方式の実装方法【Bidirectional streaming RPC】 - Carpe Diem
概要 前回の gRPCにおける各RPC方式の実装方法【Client streaming RPC】 - Carpe Diem に引き続き、最後はBidirectional streaming RPCの実装方法を紹介します。 チャットのようなリアルタイム通信や、大きなデータを少しずつ処理したい時、Simple RPCで毎回コネクションを張るコストを避けたい時などに有用です。 環境 golang 1.9.2 grpc 1.7.2 protobuf 3.4.0 成果物 最終的に出来たコードはこちら github.com 実装 リアルタイムで送信した文字列を大文字化するサービスを作ります。 proto ポイントはリクエスト・レスポンスの両方にstreamを付けることです。 syntax = "proto3"; package uppercase; service UppercaseService {
フロントエンドエンジニアのための生放送と RTMP 通信基礎
前回「フロントエンドエンジニアのための動画ストリーミング技術基礎」では HTTP ベースのストリーミング技術に関して勉強会を実施しました。視聴者に映像を届けるためのストリーミング技術に関してのお話でした。 本記事は、AbemaTV の生放送番組で撮影機材から送られた映像がエンコーダーを介してリアルタイムに放送する部分について勉強会を実施した際の資料です。 生放送における動画データの通信 AbemaTV では生放送で撮影した動画データのやりとりに RTMP というプロトコルを利用しています。 RTMP とは RTMP は Real-Time Message Protocol の略で、その名前の通りリアルタイムにコミュニケーションを行うためのプロトコルです。Web 業界では Photoshop などでお馴染の Adobe Systems 社が開発しています。Adobe Flash Player
Apache Spark Streaming + Kafka 0.10 with Joan Viladrosariera
Spark Streaming has supported Kafka since it’s inception, but a lot has changed since those times, both in Spark and Kafka sides, to make this integration more fault-tolerant and reliable.Apache Kafka 0.10 (actually since 0.9) introduced the new Consumer API, built on top of a new group coordination protocol provided by Kafka itself. So a new Spark Streaming integration comes to the playground, wi
Goにおける画像ストリーム処理について発表しました - JPEG streaming in Go #pixiv_night - BLOG::はるかさん
ご無沙汰しています、最近リードエンジニアという称号がつきましたはるかさんです。2017/03/14に開催されたpixiv nighit #2でGoにおける画像ストリーム処理の話をしました。そのうちpixiv inside に詳細がのるとおもうので、一旦スライドだけ公開しておきます。 speakerdeck.com pixivの画像変換はほとんどGoで実装されていますが、実際はcgoの呼び出し箇所が多く、時間的には8割くらいCを書いていることになります。実際cgoの呼び出し箇所では面倒なことも多く、最終的にはすべてがGoの世界になるとうれしいんですが、全ライブラリ書き換えないといけないのでなかなか難しいところです。 ImageFluxはこのあたりのところを頑張ることで、うまいことやっていこうとしているので、ご興味あれば是非声をかけていただければと思います。 recruit.pixiv.net
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - cashapp/pranadb
digital_video_introduction/README-ja.md at master · leandromoreira/digital_video_introduction
「OBS Studio」はオンライン会議でも大活躍！ デスクトップの前に立ってスライドの説明や書き込みしてみよう【OBSで動画配信！使い方とコツ】
アイ・オー、iPadを使い、PCレスでゲーム配信できるストリーミングボックス
自宅から手軽に高品質ライブ配信! 話題の「ATEM Mini Pro」試してみた【藤本健のDigital Audio Laboratory】
gRPC Streaming によるスケーラブルな常時接続型 API の構築
JPEG streaming in Go