タグ

ブックマーク / tkkm.tokyo (1)

  • 【機械学習】古いtransformersでも最新のBERTの日本語学習済みモデルを使いたかった | ゆとって生きたい。

    語の学習済みモデルを使用する際は、東北大学が公開してくれている学習済みのモデルを使用することが一般的だと思います(多分)。 そんな状況が続いていたのですが、当然ながら学習データもやや古くなり新しい使われ方をし始めた言葉(コロナなど)に対して、精度が下がるようになっている現状がありました。 ということで、新しい学習済みのモデルを探していたのですが、その導入で躓くポイントが有ったので知見として残しておこいたいと思います。 やりたいこと 東北大学が公開している日語版学習済みBERTモデルの最新のものを使用したい。 https://huggingface.co/cl-tohoku/bert-base-japanese-v2 ちなみに、よく探すと出てくる事前学習済みのモデルは下記になりますが、 https://huggingface.co/cl-tohoku/bert-base-japanes

    【機械学習】古いtransformersでも最新のBERTの日本語学習済みモデルを使いたかった | ゆとって生きたい。
  • 1