人工知能を使って動画の吹き替えを自動化するPapercup | Techable(テッカブル)

Papercupは動画の中から人の声を抽出し、別の言語に翻訳して吹き替え音声を付加する技術を開発した英国のベンチャー企業だ。コンテンツ制作会社やYouTuberが、他の言語へ動画を展開するのを助けている。 音声認識・翻訳・吹き替えの流れを自動化近年は動画コンテンツが増加してきているが、99.9%の動画は1つの言語で制作されてきた。YouTubeに限らず、ポッドキャストやCoursera等のオンラインクラス、そして、Netflixのような動画配信サービスを含め、多言語化が進めば、より多くの視聴者へリーチできる。 Papercupは動画の吹き替えを自動化し、動画制作者が低コストでコンテンツを多言語化するのを支援するものだ。アップロードされた動画の中から人の声を抽出し、指定された言語について機械学習によって翻訳を行って、人の音声を重ね合わせる流れになっている。 さらに、翻訳の品質を担保するため、

[misshiki]

事例“Papercupは動画の中から人の声を抽出し、別の言語に翻訳して吹き替え音声を付加する技術を開発”