o1-previewの性能はどのくらい向上したのか？ーGPT-4oとの性能比較｜IT navi

9月12日、OpenAIが新しい推論モデルのo1-previewとo1-miniを発表し、ChatGPT Plusなどの課金ユーザーは、即日、両モデルを利用できるようになりました。 これらのモデルは、応答前に時間をかけて考えるように設計されており、複雑なタスクを論理的に処理し、従来のモデルよりも科学、コーディング、数学における難しい問題を解決することができるとされています。 そこで、今回、新モデルのo1-previewとGPT-4oモデルの回答の性能を比較してみました。 👆僕の書いたGPTs解説書です。電子書籍版はAmazonポイント50％還元キャンペーン中です。（2024/9/13現在） １．OpenAI o1モデルの概要(1) o1モデルの推論の仕組みo1モデルには、推論トークンの仕組みが導入されており、この推論トークンを使用して思考し、プロンプトの理解をブレークダウンして、応答を生

[pechiyon]

ちなみに9.9と9.11どっちが大きい？についてはしくじることが知られています。(2024/09/14時点)

[ton-boo]

9.9と9.11の問題面白いな。Claude3.5Sonnetでももしくじりよった。「固定小数点10進数やぞ」って言うとようやく理屈をいろいろ述べつつ正解したりする

[kotesaki]

概ね同意。三校になった。自分もPlusユーザーなんだからこういう検証をサクッとやらんとあかんよね。フェルマーの最終定理はo1が公開されたその日にやってみたんだけど深堀してなかったな