
エントリーの編集

エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
「ChatGPTに敬語で話すと回答が良くなる」という噂をEvalsで自動化して検証する
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
「ChatGPTに敬語で話すと回答が良くなる」という噂をEvalsで自動化して検証する
「ChatGPTに敬語で接すると出力結果が大幅によくなる可能性がある」という噂を聞いて、文章の続きを補完... 「ChatGPTに敬語で接すると出力結果が大幅によくなる可能性がある」という噂を聞いて、文章の続きを補完するモデルだから入力する口調で出力で一定の傾向が出るのはありえないわけでもないぁと思ったのですが、ChatGPTで大喜利エンジニアリングで紹介したEvalsはこういう時の検証にも使えそうなので試してみました。 評価方法 「○○のキャッチコピーを書け(お書きいただけますか)」をセットで10パターンほど投げてみる 2つの出力を比べてどちらがより優れているかをChatGPTに選んでもらう まずこういう設定ファイルを書きます honorific-sentences: id: honorific-sentences.dev.v0 metrics: [accuracy] honorific-sentences.dev.v0: class: evals.elsuite.modelgraded.clas