大規模言語モデルの中身を覗いてみよう / look inside Large Language Models

GMOペパボの新卒エンジニア向け機械学習研修2023における座学の資料です。 機械学習について教師あり学習の考え方は知っている、ぐらいの方を対象に、大規模言語モデル（Large Language Model: LLM）がどのようにテキストを出力して、どのように学習しているかなど解説しています。 （LLMの個々のモデルの詳細やLLMのライブラリなどは対象外です） 研修では、この他にも機械学習自体の初学者向けの座学など、さまざまなコンテンツを実施しました。詳細は以下のブログをご覧ください。 https://rand.pepabo.com/article/2023/06/15/ml-training-report-2023/

[misshiki]

全27ページのスライド資料。機械学習や自然言語処理をこれまでやってきていない人にも分かるように、非常に分かりやすく書かれていると感じた。