語学シャドーイングでミスを検知し難易度調整 東大とソニーCSL、自動補助システム「WithYou」開発

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 東京大学とソニーコンピュータサイエンス研究所（ソニーCSL）による研究チームが開発した 「WithYou」は、言語学習のシャドーイング音声をリアルタイムで評価しフィードバックする、音声認識に基づいた完全自動のチューターシステムだ。学習者の発話ミスを検出し、その結果をもとに難易度の変更や音声テンプレートの繰り返し再生を行い、達成度に応じた学習ができるようにする。 シャドーイングは、 音声を聞いて即座に、もしくはほぼ同時に復唱する学習法として広く知られており、流暢さ、発音、アクセント、イントネーション、リズムなどの口語能力の多くの側面を改善することが研究で証明されている。 しかしネイティブスピ

[sunamandala]

なんでこんな変な名前なの

[Seamless]

寄稿：検出音声を解析し発話の遅れや正しい単語かをGOPで評価。OKだと次へ。NGだと繰返し、その際誤フレーズ前に一時停止を入れ難易度を下げる。連続NGは停止時間を段階的に長く上達すると短くする。