計算機科学：GPT-3は類推によって推論できる | Nature Human Behaviour | Nature Portfolio

大規模言語モデルGPT-3は、直接的な訓練なしに、複雑な推論課題を遂行して、人間の参加者と同等かそれ以上のレベルで問題に対する妥当な解を見つけられることを報告する論文が、Nature Human Behaviourに掲載される。 人間の知性の特徴の1つは、以前に遭遇したことのない新たな問題を解決できる能力である。認知科学者たちは、こうした問題解決は、「類推」として知られる重要なメンタルツールによると考えている。類推とは、なじみのない問題と過去に遭遇したことのある問題との間の類似性を見分けて妥当な解を見つける能力である。 今回、Taylor Webbらは、大規模言語モデルGPT-3の類推課題に関する成績の評価を行い、得られた結果を人間の成績と比較した。評価対象の課題は、文章に基づく行列推理問題、文字列の類推、話し言葉の類推、ストーリーの類推で、いずれも、パターンが特定された後に新たな状況に適

[misshiki]

“類推とは、なじみのない問題と過去に遭遇したことのある問題との間の類似性を見分けて妥当な解を見つける能力である。”

[Lhankor_Mhy]

うん知ってる、という結果だけど、こういうことをデータを揃えて確認するのは大事よね。

[sakstyle]

例えば「love：hate :: rich：［　］」のパターンを完成させよ（答はpoor）などの問題／人間と同等かそれを上回る能力があるが、長期記憶を備えていないので限界があるともしている