ブックマーク / note.com/usutaku (1)

  • ChatGPTに共通テスト(旧センター試験)を解かせてみた|usutaku@AI情報解説

    最近流行りのChatGPT。 「色々な作業を自動化した」 「国家試験に合格した」 ニュースで目にする機会も最近は多いと思います。 では、ChatGPTは現段階でどのくらい賢いのでしょうか? 「海外の司法試験で人間を超えた」などの情報をよく耳にしますが、実感が湧きませんよね。 今回は日人に馴染みの深い大学入学共通テスト(旧センター試験)を題材に、その実力を検証してみました。 実験方法今回は、令和4年度の国語・英語(リーディング)・公民(倫理 / 政治・経済)の3科目について実験を行いました。 ※ 数学・理科等の科目については図表を読み取る問題が多く、正確に試験できないため今回は除外しました。 ポイント①: テキストになおす大学入試センターで公表されている試験問題がPDFのため、ChatGPTに読めるテキスト形式にする必要があります。 今回はGoogle Docsの機能を活用して文字起こし

    ChatGPTに共通テスト(旧センター試験)を解かせてみた|usutaku@AI情報解説
    aru47
    aru47 2023/06/12
    few-shotのようにプロンプトを工夫すると正答率上がりそう(書き下し文の例を与えるなど)
  • 1