【自然言語処理】BERTを使って歌詞をベクトルに変換し可視化する

自然言語処理モデルの王様と言われるBERTを使って、文章をベクトルに変換し可視化しましたので、それらのタスクについて示したいと思います。 これは 「BERTによる自然言語処理入門」 を参考にしたものですが、本では、livedoorのニュースコーパスが用いられていました。 ここでは、文章コーパスとして、女性シンガー（後述）の歌詞を使ってみたいと思います。 ライブラリーのインストール BERTが格納されているtransformersのほか、matplotlibで日本語を可視化するためにjapanize_matplotlibもインストールしておきます !pip install transformers==4.18.0 fugashi==1.1.0 ipadic==1.0.0 !pip install japanize_matplotlib import pandas as pd import n

[misshiki]

“「BERTによる自然言語処理入門」 を参考にし...、文章コーパスとして、女性シンガー（後述）の歌詞を使ってみたいと思います。”

[gengohouse]

“【自然言語処理】BERTを使って歌詞をベクトルに変換し可視化する”