MPEG-2 TSファイル処理 -TSヘッダのダンプ- - Qiita
はじめに 前回はとりあえずMPEG-2 TSから1つのTSパケットを取り出し、それを1行でダンプしてみました。TSパケットを解析する場合、次にTSヘッダを解析します。TSパケットは大きく分けるとTSヘッダとペイロードの2つで構成されています。 下図の「header」と「payload」が該当します。 ISO/IEC 13818-1 より引用 「Transport Stream syntax diagram」 TSヘッダは通常4バイトになり、残りがペイロードとなります。ただし、adaptation fieldがある場合、4バイト＋adaptation field長となります。 TSヘッダについて TSヘッダに記述されているデータについては先ほどの図にあるようにsync byteからadaptation fieldとなります。 私がTSパケットを解析する際はsync byte(0x47)を始め
ヘッドフォンの抜き差しと電話の着信割り込みを検知する - Qiita
1. はじめに 久しぶりの記事投稿です。 最近、縁あって動画再生アプリの開発に従事しているため、それに関連する記事を投稿させていただきます。 ・本稿範囲：AVAudioSessionを利用しての、ヘッドフォンの抜き差し検知と電話の着信割り込み検知 ・対象読者：音楽再生アプリ、または、動画再生アプリを開発している方 ・動作検証環境：iPhone6+ iOS 8.1.2 ・開発環境：XCode 6.1.1 ・前提知識：Objective-Cの知識がある程度あること ・前提条件：今回使用する技術はiOS6以降で有効なものですので、それ以前の環境には適用できません。 2. 何故、それが必要か？ アプリケーションで音楽や動画を再生している際、ヘッドフォンを抜いたり、電話が掛かってくると音声は停止します。 が、UIの方は自動的には更新されません。 例えば、iPhoneのミュージックアプリでは、再生中と
AVAudioSessionPortDescription まとめ - アプリなどを開発するブログ
iOSで、今音声がどこから流れているのか、ヘッドフォンが接続されているのか、 Bluetoothヘッドフォンなのか、とかが知りたい時には、以下のようにして取得可能です。 AVAudioSession *session = [AVAudioSession sharedInstance]; NSArray *out = session.currentRoute.outputs; AVAudioSessionPortDescription *portDescription = [out lastObject]; で、このAVAudioSessionPortDescriptionのConstantsを以下にまとめました。 AVAudioSessionPortLineOut ドックコネクタから有線で出力中。 AVAudioSessionPortHeadphones 有線ヘッドフォンで出力中。 AVA
動画コンテンツにおいて、BGMとの制御でつまづいたところ
AWS AppSync is a fully managed GraphQL service that allows building and running GraphQL APIs on AWS. It supports real-time data, offline programming, and fetching only required data through connections to various data sources like DynamoDB, Lambda, Elasticsearch and HTTP endpoints. It handles authentication, data synchronization, conflict detection and resolution, and provides a clean interface be
【iphoneアプリ】iOS 7で非推奨になった AudioSession編 - ゆるい感じのプログラムを書きたい。
今回は、Audio系で利用する「AudioSession」についてです。 iOS 7から「AudioToolbox」フレームワークの「AudioSession」クラス が非推奨となり、 それに代わり、「AVFoundation」フレームワークの 「AVAudioSession」クラスを利用する事になりましたので記載します。 今まで「AudioToolbox」フレームワークの「AudioSession」を利用する際 以下のように記載していました。 //AudioSession利用開始 AudioSessionSetActive(YES); //音声入出力クラス利用 UInt32 sessionCategory = kAudioSessionCategory_PlayAndRecord; AudioSessionSetProperty(kAudioSessionProperty_AudioCa
iOS AVAudioSession周りの覚書 - 俺、サービス売って家買うんだ
音声 x 外部ヘッドセット周りで嵌ったのでメモメモ。φ(･･ 基礎知識 44,100 Hz デジタルオーディオにおける一般的なサンプリング周波数。アナログオーディオは一秒間に441000回標本化される。 44,100 Hz - Wikipedia ハード側 iPhoneのスピーカー 通話用スピーカー 上についているやつ 内蔵スピーカー 右側がスピーカー、左側がマイク BluetoothHFPとは Bluetooth Hands-Free Profile の略。 携帯電話 - ヘッドセット間などで用いられる、電話の発着信や通話を行なうためのプロファイル。 Bluetoothプロファイルの一覧 - Wikipedia アプリケーション側 AVAudioSessionとは？ OS(及びハードウェア)とアプリケーションの仲介を行うオブジェクト。 デフォルトでは以下の設定がされている。 再生はサポー
- [Adroid の Camera2 API と MediaCodec を使って カメラの画像をH264形式で転送する - Qiita
MediaCodec は 低レベルなビデオやオーディオのエンコーダ とデコーダを提供するクラスです。 ビデオのエンコーダは下記の形式に対応している。 H264 H263 VP8 MediaCodec クラス概要 和訳 アプリは下図の構成となる。 カメラデバイス ImageReader ImageFormatConverter MediaCodec Server MediaCodec を使ってH264形式にする 下記を参考にした。 いずれもSurface入力です。 Camera22 では、Surface入力はうまくいかず。 Buffer入力にする。 MediaCodec を利用した動画作成 MediaCodec stuff reference : createInputSurface reference : getInputBuffer MediaCodecの使い方は、コールバックを使う非同
Androidの画面をPCにミラーリングするソフトを作る１ - Qiita
はじめに 本記事ではAndroidの画面をPCにミラーリングする機能の解説をしています。 この記事の続きに Androidの画面をPCにミラーリングするソフトを作る２ リアルタイムタッチ編 があります。 こんなものを作ります Androidの画面をPCにミラーリングするソフトを作ります。 Gifではわかりませんが、50～60FPSでヌルヌル動きます。 また、Windows,Mac,Linux環境で動きます。 H.264のビットレート5000Kbps、解像度1/2で遅延は300ms前後なのでそこそこリアルタイムです。設定次第ではもっと短くなるかも。 動機 Androidの画面をミラーリングするソフトにはいくつかあります。 その中でも画質、フレームレートが、優れているソフトにVysorがあります。 普通に60FPSでヌルヌル動くので、初めて使ったときは感動しました。 無料版だと画質に制限がある
AndroidでMediaCodecを使いFFmpegなしで動画を圧縮する方法（ライブラリあり） - Qiita
追記：android-transcoderを参考に、iOSでいうGPUImageのような動画にエフェクトを掛けたりできるようにしたライブラリも登場したみたいです！ Androidで、Mp4にウォータマークつけたり、フィルターかけたりする Androidにはまともな動画圧縮の方法がなく、デカすぎる動画をそのまま3Gで送っていつまでたってもアップロードが終わらない事態になってしまいます。 どうにかして圧縮したい気持ちになった人用のライブラリを用意したのでその仕組みについて解説します。 Android 4.3 (API 18)以上で対応します。（後の罠で書きますが、解像度などに一部制限があります） ※AndroidとiOS両方で扱える動画フォーマットについては別記事をどうぞ 背景 そもそもFFmpegじゃだめなの ライセンスやら特許やらネイティブバイナリやら様々な問題を抱えることになります。 m
[Android] MediaCodecの解説と評価
こんにちは。NTTの森永です。 今回は、「現行のスマートフォン端末で撮影映像をどれだけ低遅延かつ高品質にエンコードできるか」を調査するために、Androidの低レベルなエンコード/デコード用API「MediaCodec」を評価したので、APIの使い方に関する簡単な解説と評価結果を記事にしたいと思います。 目次 はじめにMediaCodecの解説入力YUVのレイアウト解説評価結果おわりに少し分量が多いのでMediaCodecの使い方に関心がある方は2~3章を、我々の取り組みに関心がある方は1, 4, 5章を中心に読むと良いでしょう。 はじめにここまで読んで「NTTでなぜスマホのエンコーダの評価を？」と疑問に思われる方が多数だと思います。最初にこの点を前置きします。 5G通信とエッジコンピューティングを活用した、AR端末からのリアルタイムな処理のオフロード以前の森田による記事にもある通り、弊社
![[Android] MediaCodecの解説と評価](https://cdn-ak-scissors.b.st-hatena.com/image/square/c25df12f7b1e016dcf8a8b0b8f2e83e878f30358/height=288;version=1;width=512/https%3A%2F%2Fmiro.medium.com%2Fv2%2Fresize%3Afit%3A800%2F1%2AgcliEfka3C7pmIEm1gKxQA.png)
WebRTCのサンプル一覧｜npaka
以下の記事を参考に書いてます。 ・WebRTC samples 1. WebRTC「WebRTC」を使用すると、オープンスタンダード上で動作するリアルタイム通信機能をアプリケーションに追加できます。ピア間で送信されるビデオ、音声、および一般的なデータをサポートしているため、開発者は強力な音声およびビデオ通信ソリューションを構築できます。 このテクノロジーは、すべての主要なプラットフォームのネイティブクライアントだけでなく、最新のすべてのブラウザで使用できます。「WebRTC」の背後にあるテクノロジーは、オープンWeb標準として実装されており、すべての主要なブラウザで通常の「JavaScript API」として使用できます。 AndroidやiOSなどのネイティブクライアントの場合、同じ機能を提供するライブラリを利用できます。 「WebRTC」プロジェクトはオープンソースであり、Apple、
getUserMedia()の設定項目｜npaka
JavaScriptでWebカメラやマイクのメディアストリームを取得するgetUserMedia()の設定項目をまとめてみました。 1. getUserMedia()getUserMedia()は、ユーザーのWebカメラやマイクの「メディアストリーム」を取得するメソッドです。 引数では、「audio」(音声)と「video」(動画)の有効・無効を指定できます。 const mediaStream = await navigator.mediaDevices .getUserMedia({ audio: true, video: true })true・falseの代わりに「制約」を指定することもできます。 以下は、160x120の動画ストリームを取得する例になりますです。 let mediaStream = await navigator.mediaDevices .getUserMedi
WebRTCにおけるメディアの取り扱い - Qiita
WebRTC のピアコネクションにおける主要な機能のひとつに P2P メディア通信の機能があります。これは、ブラウザ上での音声映像の通話アプリケーションを実現します。ブラウザ上で動作するアプリケーションですからもちろんメディアの制御だって JavaScript の API 越しに行います。メディアの取り扱いといえば、高度な信号処理の知識が必要となる分野を想定されるかもしれませんが心配は無用です。それらを簡単に扱うためのAPIが、W3CのMedia Capture and Streamsに規定されており、これを使うことができます。 この記事では、WebRTC の APIにおけるメディアの考え方とその利用法について解説します。また、メディアをこと細やかに制御したい開発者向けに、WebRTC 以外の API からWebRTC のメディアにアクセスして利用する方法のいくつかも紹介します。なお、本文
WebRTCで統計情報を収集する - Qiita
統計情報とは？ WebRTCでは、基盤となるネットワーク環境や送受信されるメディアの情報を監視することが出来るようにように、統計情報のAPIが規定されています。 最新の仕様書は https://w3c.github.io/webrtc-stats/ です。 このAPIで取得可能な情報は、WebRTCを使ってアプリケーションを開発したことがある方なら、一度はお世話になっているであろう、chrome://webrtc-internlsやabout:webrtcで表示される情報と同じ物となります。 注意: 記事中で、SkyWayのJavaScript SDKを利用して統計情報を収集していますが、こちらは非公式な方法となります。そのため、この方法は将来変更される可能性があります SkyWay JavaScript SDK v1.4.0からRTCPeerConnectionを取得するAPIが追加され
わかさトラップ回避の為のtsパケットの解説 - Speee DEVELOPER BLOG
こんにちは。二次元エンジニアです。 さて、春アニメが軒並み終盤を迎え、新アニメも出そろい、暑い夏を感じる季節となりました。 皆様は来期どんなアニメをご覧になりますでしょうか？ 僕は「ソードアートオンラインⅡ」と「アルドノア・ゼロ」と「Free!」と「グラスリップ」と・・・などなど 合計32本ほど視聴予定です。 いつものアニメ一覧 さて、今回はアニメに少し関連したネタです。 さすがに週数十本も見るような方はシステマティックに録画と視聴を運用していると思います。 僕の周りでよくあるパターンは 「torne最強杉ワロタ組」「リアルタイムで見ないとかw組」「レコーダーあるよ組」 そして「PT3のようなPC用チューナで録画して保存している組」だと思います。 今回は一番最後の 「PT3のようなPC用チューナで録画して保存している組」の方々向けの記事となっています。 わかさトラップとは？ 皆さんはわかさ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Developer - mozx
Objective-C 2.0プログラミング言語
GStreamer SDKのチュートリアルが複雑すぎたので、なるべく簡単に音声を再生するサンプルコードを書いてみた。参考サイトはこちら。 http://docs.gstreamer.com/display/GstSDK/Android+tutorial+2%3A+A+running+pipeline