高度なAIはパッチを当てるのも難しいようです。 米国のスタンフォード大学で行われた研究によって、chatGPTのいくつかの性能がここ数カ月の間に大幅に低下している可能性が示されました。 また性能低下にともない、同じ質問に対して3月と6月の間で大幅に異なる結果が出力されていることも明らかになりました。 ビジネスや学問の場での活用が進みつつあるGPTに、いったい何が起きたのでしょうか? 今回はchatGPTの性能が低下しているとするスタンフォード大学の実験結果に加えて、性能低下は起きていないと主張するプリンストン大学の研究者たちの見解も同時に紹介しようと思います。 研究内容の詳細は2023年7月18日にプレプリントサーバーである『arXiv』にて公開されました。 Is ChatGPT’s Behavior Changing over Time? Researchers Evaluate the