ChatGPTに共通テストの英語を解かせてみたら77%取れた

今日は 2023 年共通テスト 1 日目です。 ということで、ChatGPT に 2022 年および 2023 年（追記1）の共通テストの英語（リーディング）問題を解かせてみたところ、ともに100 点満点中 77 点を獲得したのでその結果をまとめます。 前提: ChatGPT とはChatGPT2 とは、2022 年の 11 月末 に OpenAI がリリースしたチャットボットです。従来の AI チャットボットに対する期待を大きく超える自然な会話や理解力の高さが世界中で話題となり、リリース以降話題に事欠かない存在になっています。 GPT-3.5 というモデルが基礎となっており、インターネット上の膨大なデータを学習した大規模言語モデルと呼ばれる技術がベースになっています。 本記事執筆時点で ChatGPT は Research Preview の段階で、制限はありながらも無料で利用することが

[new3]

試験対策しているその辺の学生より、試験対策一切していない汎用言語モデルで77点とれてるのは凄いでしょ。試験対策一切せず共通テスト受けてそのぐらい点数取れる学生がどれほどいるか……

[taruhachi]

去年の得点だと偏差値で57、上位24%のクラスに入ってくる。受験生4人中3人より賢いというのは凄いことだと思うが、、、。

[door-s-dev]

実際に試そうとしたら結構めんどうそうだし有用な検証では

[uunfo]

それほど賢くないことがわかったのがすごくよかった（東ロボの9割はすごかった）／作問に使うのはいいと思うけど回答例をあてにしたらだめだと思う

[otihateten3510]

結構取れてるじゃん、褒めて伸ばそう

[fu_kak]

おもしろいよね、これまで人が知性だと考えてたものってほんとに知性なのか、そもそも知性ってなんなのかが次の段階に向かってる感。AIにはどんどん学習して欲しい。

[nemoba]

単なる文章生成から始まったものが、汎用的な答える力に使えてる様を見ると、味わい深い

[kappaseijin]

“ChatGPT 自身が自分で問題を作って答える ようになってしまいました。" "パターンを与えれば勝手に問題と解答を作ってくれるので、教育などの場面に応用できそうですね。”

[chainwhirler]

このすごさがわからない人はGPT-3の仕組みを一切理解してなさそう…。

[grocio]

ChatGPTは大量のコーパスを学習してるので、普通の受験生よりも勉強しているといえる。

[sds-page]

全科目で見たいよね

[mog3715]

OCRもスマホで読み取りできる時代なので、そろそろ電波妨害措置みたいのが会場に必要かもな。

[aneet]

ChatGPT、GPT3の改良版でこの成績なのすごい。今年出る予定のGPT4は3のパラメータ数の500倍とか言われてるんだが、そいつなら何点取れるだろうか?

[natsutan]

すごい

[finefinethankyou]

過去問でチューニングしたら断然好成績になりそう　インターフェースが対話形式なのが成績低下に影響してそう　そもそもchatGPTへの入力には暗黙のコマンドが付与されてそう

[Nyoho]

あなかしこあなかしこ

[nhayato]

東ロボ完成した

[peketamin]

十分英語の先生になりそう

[macj_jp]

“ChatGPT 自身が自分で問題を作って答える ようになってしまいました” 面白い。これはこれで使い道がある。

[syukit]

すごい、

[north_korea]

昔AIで東大合格を目指すプロジェクトがあったけど、言語モデル1個で全部出来そうなのがすごい

[zgmf-x20a]

私より賢い！

[hetanakata]

これの間違いの要因を細かく分析して、どのあたりに学習の穴があるかを突き止めれば、ミスリードを導く技術とかにも応用できるかも？

[areant]

人口の半分以下しか受けてないテストを、多くの人に馴染みがあるっていうの、そうでない人のことが見えてない感じする。まあ、こういうのに興味がある人のほとんどには馴染みがあるから大した違いはないか

[DashTakkun]

すごいな

[akagiharu]

普通に凄い。国語の問題でも試してほしい

[trace22]

共通テストってマークシートだっけ？サイコロとどっちが上か戦わせたい。

[saitoudaitoku]

２、３年して最適化したら満点取るようになる気がする。単純な計算や100m走るの機械の方が優れていることが当たり前だが、文章を要約したりするのも機械の方が優れているのが当たり前になる

[c_shiika]

東大入試もやってみよう。（絵描きAIくんは芸大入試をやってみよう）

[misshiki]

“ChatGPT に 2022 年および 2023 年（追記1）の共通テストの英語（リーディング）問題を解かせてみたところ、ともに100 点満点中 77 点を獲得したのでその結果をまとめ”

[otchy210]

最後の例、問題を作ってもらうやつは、定期テストの試験問題を作らないといけない現場の教師の人達への福音ではあるまいか。

[n_231]

問題生成機能ええやん。まぁ数学で解けない問題出されるくらいのことはありそうだが、トレーニングにはなろう

[benzen0141]

共通テスト英語のきついとこは分量の多さで全部読み終えることができない人多いから処理能力高いAIなら有利だけどそれでもこの点数なんだね