Stable Diffusionのプロンプトをチェックするテクニック

Stable Diffusionのプロンプトの鉄の掟 Stable Diffusionのプロンプトは、CLIPと呼ばれるAIモデルに入力されて、埋め込みベクトルに変換されて、画像を生成するDiffusion Modelの画作りのガイドとして使用されます。 そのCLIPですが、入力された文章をトークナイザで意味のあるトークン（形態素と言ってよいのかな？）に分割するのですが、そのトークンが75個までという鉄の掟があります。75個以上はどうなるかというと後半が容赦なく捨てられます。 要は、Stable Diffusionに頑張って100や200の単語を超える長文プロンプトを入力しても、最初の75個分以降の文章は、バッサリ捨てられてしまうということです。 捨てられたらもったいないですね。事前にチェックする方法を記載したいと思います。 Google Colaboratory（Google Colab

[misshiki]

“トークンが75個までという鉄の掟があります。75個以上はどうなるかというと後半が容赦なく捨てられます。”

[Imamura]

AUTOMATIC1111/WebUI版だと長すぎてあふれたプロンプトを生成後に知ることがてきるけど、これは生成前にチェックできる