Retrieve(検索)型のChatBot GPTに最近の情報や先端知識を覚えさせ、回答させるためのテクニック (Context learning, prompt tuning, …) 質問と類似度の高い データを検索して GPTに一次記憶させる GPTの記憶容量: 原稿用紙 数十枚程度 世の中のデータ: 超大量 3 Retrieve型で回答するChatBot 質問 猫の名前は何ですか? 期待する回答 猫の名前はありません。 文献情報を読み込んだ上で、GPTが回答 参考文献 1. 吾輩は猫である。名前はまだ無い。どこで生れたかとんと見当が つかぬ。何でも薄暗いじめじめした所でニャーニャー泣いていた 事だけは記憶している。 2. 彼等は我儘なものだと断言せざるを得ないようになった。ことに 吾輩が時々同衾する小供のごときに至っては言語同断である。 3. … 4 文献の検索方法 質問 猫の名前は
![[メモ]大規模言語モデル(LLM)のための文章検索に関する勉強・試行錯誤 | ドクセル](https://cdn-ak-scissors.b.st-hatena.com/image/square/aa71c3d56c25ab6552bf03d4a0e4875e0939cedf/height=288;version=1;width=512/https%3A%2F%2Fbcdn.docswell.com%2Fpage%2FL71MK4XVJG.jpg%3Fwidth%3D480)