RAGを自動評価できるRAGASを解説 : 新規事業のつくり方

RAGの評価フレームワークであるRAGASについて解説します。 RAGシステムの評価は人間の目視評価が主流従来のRAG（Retrieval-Augmented Generation）システムの評価は、人間の目視評価が主流でした。生成された回答の品質を人間が個別に評価する手法です。しかし、このアプローチにはいくつかの課題があります。 目視評価の課題・時間とコスト：大量のデータを評価するには多くの時間とコストがかかる・一貫性の欠如：評価者間の主観的な違いにより、一貫した評価が難しい これらの課題を解決するために、RAGを自動評価できるRagas（Retrieval augmented generation assessment）が登場しました。 続きを読む