Image GPT｜npaka

以下の記事を参考に書いてます。 ・OpenAI BLOG : Image GPT 1. はじめに言語で学習した大規模モデルがもっともらしい（論理的に一貫性がある）なテキストを生成できるのと同じように、画像で学習した大規模モデルがもっともらしい画像を生成できることを発見しました。サンプル品質と画像分類精度の相関関係を確立することにより、私たちの教師なし学習の生成モデルは、畳み込みに匹敵する特徴を含むことを示しています。 2. Image GPT「教師なし学習」と「自己教師あり学習」（人間がラベル付けしたデータを用いない学習）は、機械学習の長期にわたる課題です。最近では、「BERT」「GPT-2」「RoBERTa」「T5」などのTransformerモデルが、様々な言語タスクでトップの性能を達成しています。しかし、画像分類のための強力な特徴量を生成することには成功していません。私たちの研究は、

[stang499]

“GPT”