iOS16.1 以上でピクチャ・イン・ピクチャが CPU を異常に消費する問題の応急処置 - Mirrativ Tech Blog
こんにちは、エンジニアのちぎら @_naru_jpn です。ミラティブの iOS アプリでは 配信コメントバー 機能の実現のためにピクチャ・イン・ピクチャを活用しています。ピクチャ・イン・ピクチャは iOS16.1 以上の端末において、特定のシチュエーション *1 で異常に CPU リソースを消費することが知られています。コードの調整によってこの現象が抑制できることが分かり、ミラティブの iOS アプリではバージョン 10.0.1 で応急処置を行ったのですが、今回はその詳細とトレードオフについて解説します。 加えて、この問題は既に Apple へバグレポートとして報告済みですが、Apple への事象の説明のために問題を簡単に再現できるプロジェクトを作成したので、そちらも併せてご紹介しています。 ピクチャ・イン・ピクチャが CPU を異常に消費する問題 iOS 16.1 以上の端末でピクチャ
詳解V4L2 (video for linux 2)
この記事は「自動運転システムをエッジデバイスに組み込むための技術」を3回に分けて紹介するTURINGのテックブログ連載の第3回の記事「詳解V4L2 (video for linux2)」です。 第1回の「C++でOpenCV完全入門！」、第2回の「OpenCVをNPPにした結果→10倍高速に！」もぜひご覧ください！ はじめに こんにちは。TURING株式会社（以下、TURING）で、インターンをしている東大B3の中村です。 TURINGは、完全自動運転EVを作ることを目的に設立されたベンチャー企業です。自動運転システムとそれを搭載したEV車の開発を行っています。 TURINGの自動運転システムは、カメラからの映像入力を肝としています。これまではOpenCVを入力のインターフェイスとして利用していました。OpenCVを使用していたのは、 buildや使用法についての情報が多い コードが簡単に
Play Audio and Video in .NET MAUI apps with the new MediaElement - .NET Blog
Catch up on 16 sessions from .NET Conf: Focus on AI exploring how .NET developers can leverage AI libraries and features to build smarter applications, enhance productivity, and provide better user experiences. One of the most anticipated controls for .NET MAUI has been released; MediaElement. With MediaElement you can easily play audio and video from within your .NET MAUI app, in this post you’ll
SteamDeck上でUnityのVideoPlayerを利用しても動画が再生されない時の解決策 - きゅぶろぐ
これはゲーム開発者向けの記事です。 プレイヤーの方で対応方法を探している場合は[SteamDeck Proton GE]などでググってください。 症状 Winows上では、正しく動画が再生されている。 SteamDeck上で再生しようとすると、動画の代わりにカラーバーが表示される。 Unity2020.3, 2021.3 にて症状を確認。 原因 SteamDeckというかProtonの問題。 Proton GEなら大丈夫らしいが、開発者としてはデフォルトのProtonで動いてほしい。 少なくともUnityのVideoPlayer経由では、H.264, H.265の動画が再生出来ない模様。 VideoClipのCodecがAutoの時、StandaloneではH.264が使用される。 メモ 確かにドキュメントにも以下のように記載がある。 Linux の場合、最適なエンコーディングは、以下のコ
「桜井政博のゲーム作るには」は非常に低い確率が何層も重ならないと実現できないチャンネルだった──桜井さんに直接聞いた、YouTubeを始めたわけ、動画制作の手順、まだ誰も気づいていない動画内の秘密
「桜井政博のゲーム作るには」は非常に低い確率が何層も重ならないと実現できないチャンネルだった──桜井さんに直接聞いた、YouTubeを始めたわけ、動画制作の手順、まだ誰も気づいていない動画内の秘密 「桜井政博」という名を聞いたとき、みなさんは真っ先に何を思うだろうか。 筆者の場合は「すごい」の3文字である。こんなことをインタビューの冒頭で書いてしまうのも変かもしれないが、「『星のカービィ』と『大乱闘スマッシュブラザーズ』を作るってどういうことなんだろう？」と、率直に思う。 小学生のころに『大乱闘スマッシュブラザーズ X』を遊んでいた私にとって、桜井政博氏には「Nintend Directに出てきて、大企業のプレゼンのようにその辣腕を振るう、すごい人」という印象が焼き付けられていた。 そんな桜井政博氏が新たに始めたすごいこと、それこそが「桜井政博のゲーム作るには」というYouTubeチャンネ
映像伝送機器間の同期～高精度なIP時刻同期プロトコル～ - Qiita
はじめに インテル® チタンパートナーであるアイベックステクノロジーは、放送局など映像伝送市場に向けて、自社 IP コアを FPGA に搭載した製品や組み込みボードを提供しております。 放送の現場ではカメラ、スイッチャー、モニター等全ての機器が同期して動くことが求められます。複数の映像入力を組み合わせて製作するテレビ番組、特に生放送番組には高精度な同期が不可欠です。映像を途切れさせることなくカメラを別視点のものに切り替えられるのは、全ての機器が同じタイミングで動作している、すなわち同期しているからです。 放送局では従来、映像や音声、さらにそれらを伝送する機器を同期させる基準信号は同軸ケーブルを用いて 1 対 1 で伝送していました。しかし、2015 年には同軸ケーブルの代わりに多対多の IP ネットワークで伝送する規格の一つ SMPTE ST 2110 が策定されました。この規格では機器の
ノードエディタ形式の画像処理ツール「Image-Processing-Node-Editor」 - Qiita
はじめに 趣味でノードエディタ形式の画像処理ツール「Image-Processing-Node-Editor」を作りました。 その紹介の記事です。中身にOpenCVガッツリ使っているからアドカレOKですよね。。。👀？ ガッツリ使っているという意味では、GUI部分の DearPyGui のほうがガッツリ使っているかもしれませんが🤔 「Image-Processing-Node-Editor」とは 以下のように、ノードを接続していくことで、処理結果を可視化しながら画像処理が行えるツールです。 以下のような特徴があります。 主要な処理は全てPython ※ライブラリ部分除く 各処理を可視化しながら画像処理が試せる 自作ノードの追加が容易 (だと信じている) 記事書くために見直していましたが、イマイチ複雑ですわ、、、😇 OSS (Apache 2.0ライセンス) デフォルトでいくつかのAI機
intel Arc GPUでHWEncode環境 - Qiita
さくらのアドベントカレンダー2022 20日目の記事です。 どうも、さくらインターネット やまけんです。 2日目で さくらのクラウドでUniFi Network Applicationを動かす こちらの紹介をしましたが、今度はGPUでのハードウェアエンコードのお話です。 GPUでのハードウェアエンコードの話は、2018年にnvidiaのNVENCを使うお話を。 2021年にはハードウェアエンコードでの品質比較の話をさせていただきました。 今回は、今年発売されたIntelのGPU Intel Arcを使ったハードウェアエンコード環境作成のお話をさせていただきます。 はじめに intelは今年に入り20数年ぶりに単体GPUカード市場に再参入しました。 とはいえ、再参入と言っても、過去に出したGPUカードはIntel740という製品で、このカードは当時スペック詐欺と言われ全く売れず、その後のi8
WPFで映像比較ツールを作った - Qiita
2つの映像ファイルを同時に再生して簡単な比較ができるツールを作りました。 映像変換やコンピュータビジョン系の処理結果をサクッと見比べるのに便利だと思います。 世の中に似たようなツールはいろいろありますがあまりお手軽ではないため自作しました。 Windows用です。 できること 映像の再生位置を同期させる 画を見比べる 左右に並べて見比べる スライダーを動かして見比べる 映像のブレンド方法をカスタマイズする（HLSLシェーダ） 字幕表示（.srt） できないこと ガチ比較用ではないため、 フレームアキュレート、ピクセルパーフェクトな比較 正確な色の再現 はできません。 また、下記には対応できていません。 タイムコードなどメタデータの比較 ループ再生 プレイリスト 3つ以上の映像の比較 あと結構不安定です。 技術的なこと 利用ライブラリ C#とXAMLで書かれたWPFアプリケーションで、以下の
Unityで動画を再生する様々な方法 - Qiita
この再生方法の時にはAuto-Select Propertyのオプションが表示され これをOFFにするとMaterial Propertyが変更できるようになり、任意のプロパティへ動画を流し込むことができます Render Textureに動画を流し込む(Render Mode=Render Texture) 動画を再生する用途としてはこの方法が最も頻度が高いと思われます Render Textureに動画を流すので、そのRender TextureをUIとして使用したり、MaterialのTextureとして使ったりと用途が豊富です まず右クリックメニューからCreate->Render Textureを選択し、Render Textureを作成します 次に任意のGameObjectにVideo Playerをアタッチし、Render ModeをRender Textureに変更します
FFmpeg - Ultimate Guide | IMG.LY Blog
These last two sometimes are referred to as "8 bit" or "10 bit" respectively, especially when talking about videos. That means 8/10 bits per single color channel. TransparencySome image formats support an additional channel together with the red, green, and blue components: the alpha channel. The alpha channel determines how transparent a single pixel is, and it can have different bit-depths, it i
動画エフェクト負荷を大きく軽減した HEVCPlayerView 詳解 | BLOG - DeNA Engineering
ソフトウェアエンジニアの坊野です。 この blog では、先日 GitHub で公開された HEVCPlayerView について説明させていただきます。 背景 Pococha は DeNA が提供しているライブコミュニケーションアプリです。 Pococha は動画配信時に様々な動画エフェクトを表示しています。 この動画エフェクトは配信画像の上にエフェクト画像を合成することによって実装されています。 しかし、この "動画エフェクトが重い" というご意見を多くのユーザからいただいたため、私たちはこの動画エフェクト表示部分の負荷について詳しく調査しました。 その結果、以下の処理の負荷が高くなっていました。 動画ファイル1 のデコード 動画ファイル1 の読み込み 当時 Pococha の動画エフェクトは 2 個の動画ファイル1 で構成されていました。 Pococha は動画エフェクト表示時にこれ
津の片隅からファイバーなしでライブ配信する技術 #rubykaigi #ruby_music_mixin - pixiv inside
こんにちは、CTOのharukasanです。CTO以外にImageFluxのプロダクトオーナーもやっています。 ピクシブは三重県津市で開催されたRubyKaigi 2022にMusic Lounge Sponsorとして参加しました。 Ruby Music Mixin ピクシブでは最終日2022/09/10 (土)にRuby Music Mixinというラウンジを提供させて頂きました。Ruby Music Mixinについては別にalitasoが記事を書いてくれたのでそちらをご参照ください。 inside.pixiv.blog Ruby Music Mixinのトリをつとめる弊社若手の様子 RubyKaigi 2022は感染症対策のため三重県津市の会場とオンラインのハイブリッドで開催されました。これにあわせ、Ruby Music Mixinも物理ラウンジに加え、オンラインラウンジとして配信
StableDiffusion、早速アニメ化に対応｜shi3z
StableDiffusionをアニメ化させるコードが相次いで発表されている。 オープンソースの力だ。 試しに「ジブリ風の森」でアニメーションを作ってみた。こんなアニメーションがものの数分でできる。実写だってそんなに簡単には作れない。 https://gyazo.com/75baaf696ce0bcff0e027010abd58b2c
Stable Diffusionによる動画生成をGoogle Colabでやってみる
１.はじめに 文から画像生成をするモデルを使って、出力画像をズームやシフト等をさせ、それを初期値にして文で画像生成することを繰り返すと面白い動画が出来ます。今回ご紹介するのは deforum氏が開発した Stable Diffusion を使った動画生成をするGoogle Colabです。 2.学習済みパラメータのダウンロード まず学習済みパラメータをダウンロードします。Hugging Faceからアクセストークンの取得をしてない方は、このブログの「２．アクセストークンの取得」を参考に取得してから下記に進んで下さい。 このリンクをクリックし、学習済みパラメータ（stable-diffusion-v-1-4-original）の使用申請をします。I have read the Licence and agree with its terms のチェックボックスにチェックを入れ、Access
ゲームのライブ配信画面上で視聴者がステージを作って配信者に送れるシステムの構築 - Qiita
ゲーム配信を見ながら次のステージを作って送り付ける 昨今のアクションゲームなどには、ブロックのようなパーツを組み合わせてステージを作成し、インターネットを介して自作ステージを交換できるものが多くあります。一番有名なのは「マリオメーカー」でしょうか。 個人的にはネット登場以前ですが、「天誅 忍凱旋」のメモリーカード物理やりとりが一番思い入れ深いです。 ゲーム実況文化においても、ゲームの「ステージエディット」機能を使って、動画配信者がファンによるステージに挑戦する「視聴者参加型」配信があると思います。自分が考えたステージを遊んでリアクションしてもらえる！というのはファンにとって非常にうれしいことです。 しかしながら、ステージ制作とその共有機能は、当然ながらゲームソフトの１機能です。 配信の視聴とは別に、事前にゲームを立ち上げて作り込みをやらなくてはなりませんし、ファンの中には経済的な理由などで
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
アバター2はなぜ48コマなのか。HFR映画がもたらす視覚効果とリアリティ
ゲームのステージを動画配信の視聴者に作らせる | ドクセル
琴葉姉妹立ち絵素材ver1.0 / しりんだーふれいる さんのイラスト
2022年の動画再生アプリの作り方
