GPT-4 APIがやってきた!3.5と"性能"を比較する｜shi3z

Waiting Listにもっと時間がかかるかと思ったのだが、予想外に早く(一日)APIのロックが解除された。ただしまずは8Kトークン版のみ。 GPT-3.5が4Kトークンだったから倍の長さのストーリーが出せるということだ。 ただし値段はChatGPT APIの10倍。元に戻った感じ。 これはどっちを使うべきか結構悩むぞ。 こんな感じで呼ぶ % curl https://api.openai.com/v1/chat/completions \ -H 'Content-Type: application/json' \ -H 'Authorization: Bearer APIKEY'\ -d '{ "model": "gpt-4", "messages": [{"role": "user", "content": "宮崎駿について"}], "temperature": 0.7 }'答えはこ

[teppeis]

「「プロ驚き屋」の過剰な驚愕表現」

[north_korea]

GPT-4がより賢くなったジャンルで比較した方がいいのでは。単純な要約で100倍賢くやるのは人間でも無理なきがする。

[haatenax]

手元で使ってるけど正直騒がれてたほどは凄さは上がってない。画像入力とかが解禁されてからが真骨頂だと思う。Twitterの過度に煽ってくるアカウント群にはもううんざり。

[door-s-dev]

期待しすぎでは。誰も100倍賢いなんて言ってないでしょ

[neko2bo]

“結局のところ、「何に使うか」ということが一番大切という視点を持たないと、ただただ「プロ驚き屋」の過剰な驚愕表現に振り回されることになってしまう”

[ata00000]

まだまだ正解・正確な答えを求めるのには向いてない感じだよね。提案とかのような、唯一の解があるわけではないようなものに使うのが良さげ

[theatrical]

データ量に対して性能の向上は対数的な増加になりそうな気はする。なので筆者が前主張していた通り、何らかのイノベーションが無いと一定の限界はありそう。

[gabill]

“プロ驚き屋”

[mumei-0]

“結局のところ、「何に使うか」ということが一番大切という視点を持たないと、ただただ「プロ驚き屋」の過剰な驚愕表現に振り回されることになってしまう。”

[mcddx30]

“ちなみに、GPTシリーズのAPI利用料金は消費トークン数に比例するので最初から「百文字で説明しろ」とかいう方がお金を節約できる。”

[hom_functor]

"プロ驚き屋"

[jankoto]

冷静にベンチマークすると「結局何がそんなに凄いんだっけ？」ってなるやつか。他のツールがよく知られてないから騒がれてる面はあるだろうな。

[cartman0]

どうせ汎用さなんてまだまだなんだから特化させて比較してほしい

[hhungry]

shi3z氏はなぜGPTに対して毎回ずれたことを言ってるんだろう？100倍賢くなるってGPT4が人知を超えたナニカになるとでも思ったのか？

[hirolog634]

毎回、清水さんがGPTシリーズを軽くディスってるのを読んでから実際に試してみると、思ったより凄くて素直に感激してる。ChatGPT APIも十分に凄かった。今回もそれな気がする。

[buhoho]

使ってくると結構違いみたいなのが見えてくる。人間と同じで深く関わらないとGPT-4の奥深さが見えない感じ。そして大方の処理にGPT-4使う必要ないみたいなのは同意w

[shunkeen]

ご指摘はごもっともだなぁと思ったり。私も含めてだいたいの人はハイエンドモデルなんて必要としていなくて、廉価版で十分なんだろうと思う。ただ、最前線で試している清水さんには必要なおもちゃって気もする。

[typographicalerror]

"もちろん前よりいいけど10倍の値段を払うかと言われたら、払いどころは考えるよ" そうだね

[hetoheto]

ウソやろ…？ここで「極めてなにか生命に対する侮辱を感じます」って直に怒られたエピソード入れずにいついれるの…

[natu3kan]

文脈読みマシーン。パソコンのハード性能が今の10倍とかになれば、本当にシンギュラリティくるかもね。

[sirocco]

“curl ”によるアクセス。

[minamishinji]

この言語モデルの可能性と限界を両方感じる。そのあたりが明確になればさらなる進化が見えてくるんだろうな。

[izoc]

プロ驚き屋は草

[yarumato]

“GPT-3.5が4Kトークン、8Kトークン版は倍の長さのストーリー出せる。値段は10倍。遅い（18秒->29.54秒）。饒舌になったが正確性は。API利用料金は消費トークン数に比例するので「百文字で説明しろ」はお金を節約できる”

[snaflot]

GPT-4で世界がガラリと変わることを僕は密かに期待していたのだが、予想通り、残念ながらそうでもなかった。

[tekmak]

検索エンジンとして使ってるの？

[irimo]

確かに、正確さに欠けることを言うというのは、すごい統合失調症の人を活用するみたいに捉えたらわかりやすいのかな。

[uunfo]

プロ驚き屋の煽りに惑わされずGPT-4はコスパもタイパも悪いと言う冷静な意見

[naggg]

はえー。もうウェイトリストから抜けたのかー。