次元感情認識のためのクロスアテンションオーディオビジュアルフュージョン

Cross Attentional Audio-Visual Fusion for Dimensional Emotion Recognition マルチモーダル分析は、孤立したユニモーダルアプローチよりも感情認識の全体的な精度を向上させることができるため、最近、感情コンピューティングに大きな関心を集めています。マルチモーダル感情認識の最も効果的な手法は、顔、声、生理学的モダリティなどの多様で補完的な情報源を効率的に活用して、包括的な特徴表現を提供します。この論文では、ビデオから抽出された顔と声のモダリティの融合に基づく次元の感情認識に焦点を当てます。ここでは、複雑な時空間関係がキャプチャされる可能性があります。既存の融合技術のほとんどは、オーディオビジュアル（AV）モダリティの補完的な性質を効果的に活用しないリカレントネットワークまたは従来の注意メカニズムに依存しています。クロスアテンシ

[arxiv_reader]

マルチモーダル分析は、孤立したユニモーダルアプローチよりも感情認識の全体的な精度を向上させることができるため、最近、感情コンピューティングに大きな関心を集めています。マルチモーダル感情認識の最も効果的