AI超解像で古いビデオがキレイに復元できる「VLC media player 3.0.19」が公開、ゼロデイ脆弱性の修正も／AV1ビデオのハードウェアデコーディングも有効化
低解像度の音声データを超解像化をする拡散ベースの生成モデル AudioSR が公表されていました。リンク先に変換サンプルなどもあり、音声や自然音、音楽など幅広いジャンルの例が示されています。高い再現度であるようなので、さっそく試してみました。 インストール!pip install git+https://github.com/haoheliu/versatile_audio_super_resolution実行！GPUメモリを16GBくらい消費します。Google Colab無料枠だとメモリが足らなくて動かない感じでした。 !audiosr -i /content/kurumi.wav変換例変換前（サンプリングレート8kHz）
［GDC 2024］DLSS，FSR，XeSSなど乱立する超解像技術をゲーム開発者が扱いやすくするMicrosoftの新仕様「DirectSR」とは？
［GDC 2024］DLSS，FSR，XeSSなど乱立する超解像技術をゲーム開発者が扱いやすくするMicrosoftの新仕様「DirectSR」とは？ ライター：西川善司 米国時間3月21日，GDC 2024においてMicrosoftとAMD，NVIDIAの面々が勢揃いした開発者向けセッション「DirectX State of the Union」が行われた。この中でMicrosoftは，DirectXの新要素として自律駆動型GPU描画サブシステム「Work Graph」と，超解像技術の標準化仕様「DirectSR」を発表している。 Work Graphについては，すでにレポートを掲載しているので，本講では，DirectSRについて取り上げたい。 セッションを担当した Shawn Hargreaves氏（左，Dev Manager，Direct3D，Microsoft） Rob Marti
NVIDIAの「DLSS」やAMDの「FidelityFX」など複数のゲーム超解像技術に単一コードで対応可能になるAPI「DirectSR」をMicrosoftが発表
NVIDIAの「DLSS」、AMDの「FidelityFX」、Intelの「XeSS」といった複数のゲーム超解像技術を単一のコードで有効化できるAPI「DirectSR」をMicrosoftが発表しました。 DirectX Innovation on Display at GDC 2024 - DirectX Developer Blog https://devblogs.microsoft.com/directx/directx-innovation-on-display-at-gdc-2024/ 「DLSS」「FidelityFX」「XeSS」といった超解像技術はAIを用いてフレームを生成したり解像度を向上させたりする技術で、GPUの負荷を抑えつつゲームの画質やフレームレートを向上させることが可能です。それぞれの技術は対応GPUさえ用意すれば使えるわけではなく、ゲーム側が各技術に対応し
マイクロソフトが超解像API「DirectSR」発表。DLSSやFSR、XeSSなど各社のアップスケール技術を単一コードで有効化 | テクノエッジ TechnoEdge
マイクロソフトが、Nvidia、AMD、インテルのGPUがそれぞれ供えるアップスケーリング技術を、単一のコードパスでアクティブ化するDirectXのなかの新API「DirectSR」を開発していることを明らかにしました。 ディスプレイの解像度が高くなるにつれ、GPUの描画処理にかかる負荷は飛躍的に大きくなっています。そのためNvidiaは2020年に実際の描画は低解像度・低負荷で行い、そこにディープラーニングを利用したアップスケーリング/アンチエイリアシングを施すことで高精細な映像にするDLSS 2.0技術を開発、導入しました。
NVIDIA、AMD、インテルの“超解像技術”、Windows 11が統合へ。新API「DirectSR」発表 | Gadget Gate
PC 超解像技術の利用ハードルを下げる可能性 NVIDIA、AMD、インテルの“超解像技術”、Windows 11が統合へ。新API「DirectSR」発表 Image:Piotr Swat/Shutterstock.com ここ数年、ゲーミングPCでは超解像技術の利用が活発化している。システム内部では低解像度で描いて負荷を減らしつつ、AIによりアップスケーリングすることで見かけは高解像度にするものだ。一方、GPUメーカーがそれぞれ独自規格を打ち出すことで、乱立していた感があった。 そんななか、マイクロソフトがNVIDIA、AMD、インテルの超解像度機能を統合し、ゲームを開発しやすくする新たなWindows API「DirectSR」を発表した。 同社のプログラム・マネージャーであるジョシュア・タッカー氏はブログ記事で、これをゲームとSR（超解像技術）間の「ミッシング・リンク」と表現し、「
「Pixel 8a」5月14日に発売 「最大8倍超解像ズーム」「Gemini」「音声消しゴムマジック」など利用可能 直販価格は7万2600円から
Pixel 8aは、Pixelブランドの廉価ライン「Pixel aシリーズ」の最新モデルで、先行するハイエンドモデル（Pixel 8／8 Pro）と同様に「Gemini」「ベストテイク」「音声消しゴムマジック」といったAI関連の機能を搭載している。ディスプレイの大きさや解像度、カメラ性能に関してはハイエンドモデルには及ばないものの、必要最低限のスペックを備えつつも、コストを抑えているのが大きな特徴となっている。 Pixel 8aのアウトカメラは、最大8倍の超解像度ズームが可能で、消しゴムマジック、夜景モード、ボケ補正など、Pixelシリーズでおなじみの機能にも対応する。「リアルトーン」により写真や動画において、人の肌の色合いを正確に再現できるという。 Googleの生成AIの次世代モデル「Gemini」も利用可能で、文字と音声の入力、画像の追加に活用できる。お礼のメッセージを書いたり、旅行
はじめに以前から超解像の記事はいくつも書いてきました。 超解像（Super Resolution）とは画像の解像度を上げることです。「アップスケール」と言われているものとほぼ同じだと思います。 今まではOpenMMLabのMMEditingを使うことが多かったのですが、いつのまにかMMEditingがMMagicに吸収されました。 今回MMagicで超解像に挑戦したのですが、Pythonスクリプトはたったの3行でした。Pythonスクリプト from mmagic.apis import MMagicInferencer editor = MMagicInferencer('esrgan') editor.infer(img = "test.png", result_out_dir = "result.png") 2行目で使用するモデルを指定します。 これだけでモデルのダウンロードも自動で
Microsoft、超解像機能『自動スーパー解像度』を実装予定。Windows11 24H2にて | ニッチなPCゲーマーの環境構築Z
Microsoftは、OSネイティブで超解像機能の実装を予定している模様です。 超解像とは、低画質な画像や映像を高画質へとアップスケーリングする技術。NVIDIAでいうところのDLSSやRTX Video Super Resolutionなどがこれにあたります。 2024年2月8日付けでリリースされたWindows11 24H2 Insider Preview CanaryおよびDevチャネル Build 26052には、Microsoft独自の超解像機能の項目が追加されています。 この項目はデフォルトではまだ有効化されていませんが、Windowsの内部機能を強制的に有効化・無効化できるアプリ『ViVeTool』を使用すれば表示させることができます。手順は以下。 Windowsの内部機能を強制的に有効化・無効化できるアプリ、ViVeToolをダウンロードして任意のフォルダにインストール(z
Microsoft、NPUで動作する「Automatic Super Resolution（自動超解像）」発表 - Windowsそのものに統合
Microsoft、NPUで動作する「Automatic Super Resolution（自動超解像）」発表 - Windowsそのものに統合 米Microsoftは6月6日、「Automatic super resolution（Auto SR）」機能を発表した。NPUで動作すると記述があるが、今のところQualcomm Snapdragon Xシリーズを搭載したCopilot+ PCでしか使えないようだ。 Microsoft、NPUで動作する「Automatic Super Resolution（自動超解像）」発表 - Windowsそのものに統合 最近のゲームでは、負荷軽減のために実レンダリング解像度よりも低い解像度で描画した後に、超解像機能を用いて引き延ばすアプローチがとられている。この機能にはGPUベンダーごとに互換性があるものとないものとが存在しているため、Microsoft
PS5 Pro (仮)は大幅強化で『GTA VI』と同時期発売？描画45%高速化・レイトレ3倍・独自ML超解像PSSRなど「開発者向け文書」と称する資料 | テクノエッジ TechnoEdge
ゲーム関連のリーク情報を扱うメディアやYouTuberが、公式には発表されていない新型プレイステーション『PlayStation 5 Pro』(仮)についての開発者向け文書と称する内容を相次いで紹介しています。 ハードウェア仕様についての内容を一部抜粋すると、GPU部分が「描画45%高速化」「レイトレーシング性能2倍～4倍」「AIアクセラレータ性能300TOPS」、DLSSやFSRに相当する超解像技術PSSR対応など大幅強化。CPUはクロック向上、メモリ帯域が28%増など、このとおりで出れば強力な新型です。 PS4に対するPS4 Proのように、あくまで高性能なPS5の位置づけで、発売はターゲット2024年末とされています。 今回の「リーク」以前から、SIEが前世代でいうPS 4 Proにあたる中継ぎの性能向上版、いわゆる mid-gen (中間世代)モデルを用意しているようだ、とのうわさ
AMD、フレーム補間機能などが追加された最新の超解像技術「FSR 3」ソースコードとDLLファイルを公開。Unreal Engine 5プラグインも同時にリリース
AMDの超解像技術「FSR 3」の全ソースコードとDLLファイルが公開 MITライセンスでのリリースで、条件を満たせば自由な利用が可能 Unreal Engine 5用プラグインも同時にリリース AMDは2023年12月14日（現地時間）、超解像技術「AMD FSR 3（FidelityFX Super Resolution 3）」のDLLファイルと全ソースコードを公開したとGPUOpenニュースにて発表しました。 公開されたソースコードやDLLファイルはGitHubにて利用できるほか、同時にUnreal Engine 5用プラグインもリリースされています。 🎵 On the first day of Gamesmas, my #gamedevs sent to me … … the first release of #AMD #FSR3! 🎵 🎁 With a bonus gift
超解像機能をWindows DirectXそのものに搭載！？ その名もMicrosoft「DirectSR」 3月21日にアメリカ・サンフランシスコで開催予定のGDC 2024において、MicrosoftはWindowsに搭載予定とみられる超解像技術について発表を行うと明らかにされている。この機能の名称についてMicrosoftが言及したのは初めてのことで、「DirectSR」と呼称されているようだ。 超解像機能をWindows DirectXそのものに搭載！？ その名もMicrosoft「DirectSR」 超解像技術とは映像出力の解像度よりも低い精度でゲーム等をレンダリングし、引き伸ばして画面表示を行うことで性能向上を図る先進技術。通常ゲーム側に統合されているもので、ドライバ側で動作させようとする「AMD HYPR-RX」ですら少数派。GPUベンダーごとに性能や品質、対応デバイスが異な
Windows 10 64bit版 Windows 11でも動作すると思われますが、動作確認は行っておりません。 8GB程度以上のメモリ 画像の大きさにより必要となるメモリ量は異なります。 任意：DirectX 12対応のGPU DirectX 12対応のGPUがある場合、より高速に動作します。 （AMD Radeon HD 7000以降、Haswell以降のintel製CPU内蔵のGPU、NVIDIA GTX 600以降） アプリはフリーウェアとして提供されます。著作権は作者が保持します。 再頒布（他のウェブサイトにアップロードする等）は禁止します。 アプリは現状有姿で提供され、動作の保証は行いません。また動作環境、使用法に関する質問等には対応できません。 アプリは予告なく公開停止する場合があります。またシェアウェア化、有償化する場合があります。 アプリの利用に伴う結果、および変換した画
NVIDIAのAI超解像化機能「Video Super Resolution」、RTX 20シリーズでも利用可能に 米NVIDIAは10月17日（現地時間）、AIによる動画アップスケーリング機能「RTX Video Super Resolution」のアップデートを発表した。GeForce RTX 30/40シリーズに加えて、GeForce RTX 20シリーズのデスクトップ向けおよびノート向けGPUでも同機能を利用できるようになった。 RTX Video Super Resolutionは、RTX Tensor Coreと様々なコンテンツで訓練されたディープラーニングネットワークを用いて、フレーム単位でビデオを分析し、映像の品質を向上させる。ブロックノイズを除去し、エッジや特徴を強調してビデオのシャープネスや明瞭度を向上させ、元のビデオよりもクリーンで鮮明な画像を生成する。それにより、C
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
オーディオ超解像技術 AudioSR を試す｜はまち
「Edge」で閲覧中の画像がMicrosoftに筒抜け？ ～AIで画像をキレイにする「超解像」機能に注意／サーバーで処理されるか、ローカルで処理されるかを意識しよう【やじうまの杜】
Microsoft、超解像ゲームのための統一API「DirectSR」を発表 ～NVIDIA、AMD、Intelに対応／GPUが自律的にワークフローを管理する「Work Graphs API」と併せて「GDC2024」で
もうNVIDIA/AMD/Intelで悩む必要はない？DirectXが全超解像技術を取り込み
AMD製GPUでも超解像に対応した「VLC media player 3.0.21」が公開【6月11日追記】／古い動画もAIがキレイに。脆弱性の修正も
NVIDIA/AMD/Intelの超解像技術を統合「DirectSR」、プレビュー版が公開
あらゆるゲームに超解像（Super Resolution）を ～「DirectSR」のプレビューが開始／AMD、Intel、NVIDIAと協力して、GPUベンダーの超解像技術を統合
Radeonドライバに新実装されたビデオの超解像機能、使ってますか？
AI超解像で古いビデオがキレイに復元できる「VLC media player 3.0.19」が公開、ゼロデイ脆弱性の修正も（窓の杜） - Yahoo!ニュース
OpenMMLab の MMagic を使って超解像。え、たったの3行？ - パソコン関連もろもろ
Intel、モアレやチラツキが改善された超解像技術「XeSS 1.3」
超解像機能をWindows DirectXそのものに搭載！？ その名もMicrosoft「DirectSR」
PixSr4x - イラスト向け4倍超解像Windowsアプリケーション
NVIDIAのAI超解像化機能「Video Super Resolution」、RTX 20シリーズでも利用可能に