大規模言語モデルの中身を覗いてみよう / look inside Large Language ModelsGMOペパボの新卒エンジニア向け機械学習研修2023における座学の資料です。 機械学習について教師あり学習の考え方は知っている、ぐらいの方を対象に、大規模言語モデル（Large Language Model: LLM）がどのようにテキストを出力して、どのように学習しているかなど解説しています。 （LLMの個々のモデルの詳細やLLMのライブラリなどは対象外です） 研修では、この他にも機械学習自体の初学者向けの座学など、さまざまなコンテンツを実施しました。詳細は以下のブログをご覧ください。 https://rand.pepabo.com/article/2023/06/15/ml-training-report-2023/
