この動画は3Blue1Brownの動画を東京大学の学生有志団体が翻訳・再編集し公式ライセンスのもと公開しているものです。 チャンネル登録と高評価をよろしくお願いいたします。 日本語版Twitter https://twitter.com/3B1BJP 元チャンネル(英語) https://www.youtube.com/c/3blue1brown 元動画(英語) https://www.youtube.com/watch?v=eMlx5fFNoYc&t=795s&pp=ygUVYXR0ZW50aW9uIDNibHVlMWJyb3du 訂正 冒頭でAttention機構は2017年の論文ではじめて登場したと紹介していましたが、正しくは2014年にBahdanauらによって初めて導入されていました。もちろんそれ以前にも、人々がこのアイディアについて実験していたのではないかと思います。コメン
![GPT解説2 アテンションの仕組み (Attention, Transformer) | Chapter6, 深層学習](https://cdn-ak-scissors.b.st-hatena.com/image/square/7320139d3760e20464c94b07dc675dcf94303978/height=288;version=1;width=512/https%3A%2F%2Fi.ytimg.com%2Fvi%2Fj3_VgCt18fA%2Fhqdefault.jpg)