タグ

2023年7月25日のブックマーク (1件)

  • Prompt Flowを使ってRAGの回答を自動評価する - Taste of Tech Topics

    皆さんこんにちは。データサイエンティストチームYAMALEXのSsk1029Takashiです。 YAMALEXは Acroquest 社内で発足した、会社の未来の技術を創る、機械学習がメインテーマのデータサイエンスチームです。 Microsoft Buildを経て、AzureにもGPTを利用したサービスが数多く発表されており、LLMをサービスとして利用できる使い方増えていてワクワクしますね。 今回と次回の記事を通して、その中のサービスの一つであるAzure Machine Learning Prompt Flowというサービスを使ってRAG(Retrieval Augmented Generation)の回答を自動評価するシステムを試してみます。 この記事では、まずはPrompt Flowを使って手動で回答を評価してみるところまでを検証します。 ※RAGとは事前に知識を検索エンジンなどに

    Prompt Flowを使ってRAGの回答を自動評価する - Taste of Tech Topics
    KenichiroMurata
    KenichiroMurata 2023/07/25
    Azure Machine Learning の Prompt Flowを使って、ChatGPTのモデルを使ったRAGの回答を評価できるのはかなり良いね。そのままソリューションの中に組み込みたい♪