ChatGPT o1とGemini 2.0の性能を比較してみた｜IT navi

2024年12月5日、OpenAIが高度な推論能力を持つo1の正式版を公開しました。現在、有料のChatGPT Plusなどのユーザーがo1を利用できます。同年9月からプレビュー版のo1-previewが使えるようになっていたのですが、それよりもかなり性能が上がっています。 また、Googleは、2024年12月6日にGemini-Exp-1206（Gemini 2.0 Experimental Advanced）、同月11日にGemini 2.0 Flash Experimental、同月19日にo1のような推論モデルのGemini 2.0 Flash Thinking Experimentalを公開しました。 AIモデルの性能が著しく向上し、平均的な人間の能力を超えてきたため、筆者が性能を評価するのも難しくなってきていますが、今回も、現在、最高峰と言えるこれらのAIモデル（o1とGem

[TriQ]

めっちゃありがたい比較だけど今や性能云々よりも何に使うかの方が大事だよなぁ。この比較の半分以上の設問についても「自分はそんなことには使わないなぁ」って思う人がほとんどでしょう

[mayumayu_nimolove]

なんかこう言う数字ってあんまり意味ないよね。実際使ってみるとここに出てないclaudeが人気な理由がわかるしさ。

[fromdusktildawn]

ChatGPT plusからGemini Advancedに乗り換えるかを検討しようと思っていたところだったので、大変参考になりました。

[mangabon]

Geminiは今後も対抗馬としてありつつも負け続けることで、高性能かつ無料のままでいてほしい（ひどい）。普段使いレベルならGeminiで十分。

[mobile_neko]

Geminiも良さそうだけど、もうしばらくChatGPTへの課金を継続かしらね

[Windfola]

負け続けている一方ずっと対抗馬の位置をキープし続けるGeminiさんというイメージがまた更新されてる

[hotelsekininsya]

翻訳用にしか使ってないけどGeminiかなぁ。優秀って意味じゃなく無料だから。ただ、「私には出来ません」て、ちょくちょくウソ言うのが腹立つ。

[abiruy]

やはりgemini deep researchのリサーチ結果をo1に分析させるのが今の最適解なんだろうなあ

[rt24]

Gemini Advancedと4o使ってるけど、Geminiはまだまだ細かくプロンプトで制御しないと期待通りの出力が出てこないことが多いんだよな。

[misshiki]

“Chatbot Arenaでの性能評価では、Geminiのスコアがo1のスコアを上回っているようでしたが、実際にテストしてみると、ほとんどの分野でo1の性能がGemini 2.0を圧倒していました。”

[lalala360]

実際使ってみると、Geminiの安定してサクサク回答してくれるスピード感は魅力。ただしGeminiはWorkspaceアカウントでないと質問を学習に使うので注意が必要。

[exciteB]

「村上春樹風文章はGeminiのほうが上」なのはなぜだ

[bitc]

検索スマホ動画色々やってる会社か　生成AIだけ専門の会社か　どっちがいいか考えたらわかるやろ

[rti7743]

Geminiは知らないことを聞くと言い訳してくるから微妙。ChatGPTでいいと思う。ただ、perplexity.aiとか他のAIにも同じ質問して多数決を取るセカンドオピニオン方式がいいと思う

[auto_chan]

肌感覚と一致するところある。社畜でさんざん使っているとGemini君はところどころ「やる気はあるけど成果物にちょっと注意が必要な部下」みたいな性格してる。政策秘書のGPT君、軽作業のGemini君。

[welchman]

結論としては、「人間はプロンプトを頑張ろう」なんだよね。この程度の差では、そんなに変わらないと思う。/性能の差よりも「sonnet君がイケメンお兄さんキャラだな」みたいな印象の差を強く感じるので、人類はチョロ

[ofedelo]

Geminiは長文を理解できるトークン数が売りだから。厚い本１冊分くらいの内容を理解して答えてくれる。後はO1よりかなり早い。

[tohima]

体感でo1の方が圧倒的に上なのでGeminiは選択肢に上がることはないなあ

[otihateten3510]

いいから両方使えよ

[blueboy]

比較対象を間違えている。Geminiは たいていの質問で「どちらとも断言できません」という優柔不断な回答を出すので、使い物にならん。使い物になるのは Felo、Perplexity、Genspark だよ。Copilot の画像も。Gemini は排除しろ。

[rocketboy_miya]

どうしても月3000円の課金は難しいと感じてしまうため、様々な生成系AIを無料の範囲内で使用させて頂いています。

[FreeCatWork]

素晴らしい情報を共有していただき、感謝します。

[eroyama]

使う人によって重視するポイントが違って、性能重視ならgptで、性格重視ならclaudeで、総体的な説明を最初から全部してくれるならgeminiということだね / 難しいことにはo1が要るね

[Quontan]

この手の比較、一部の人はありがたいかと思うんだが私的に使うジャンルが出てこないからあまり読み応えがないケースが多い気がする

[ToTheEndOfTime]

フロムダ先生はplusではなくproを使ってるのかと思ってた。

[theatrical]

Geminiはapiが安いから好き。free tierでも結構使えるし

[quwachy]

AIは2030年までに東大合格できるのか、とりあえず今年の共通テストが楽しみ

[raitu]

“数学や論理的な性能でo1の性能が高いことは言うに及ばず、知識や文学的表現でもGeminiの性能を上回っていました”

[augsUK]

Google翻訳はDeeplに負けたままやる気なくしたけど、さすがにGeminiはもう少しがんばるのかな。

[tonza_dopeness]

巨人たちが切磋琢磨するのはありがたいことで、庶民としては各人の課題に良く回答してくれるサービスを利用するのが良いね。

[twainy]

実感通りの結果だった。Googleが首位になって良いことがあるとは思えないので、今の立ち位置のままでいてほしい