AI、というよりはChatGPTのようなデカくて応用力が期待されるLLMに向いてない..

AI、というよりはChatGPTのようなデカくて応用力が期待されるLLMに向いてない。 LLMはあくまでも、データセットから学んだ情報を元に「与えられたテキストにはどんな言葉が続く可能性が高いか」で動く。 LLMは人間ではないので、自然言語をトークンという値に変換してから学ぶ。この場合、我々にとっての数字の1はLLMにとって数字の1ではなくなる。要は、1を1として認識してない。 だからChatGPT単体では正しくカウントできないことがあるし、計算や生年月日の他、細かい部分も間違うことがある。ただ確率に従っているだけで、自分が何を書いてるか分かってないから。 脳の中に色んな概念が重なり合っていて、その中から一つの可能性を選び続けているだけだと考えればいい。 この仕様で常に正しい情報を言うってことは、めちゃくちゃ学習して「この流れの時は99％の確率でこのトークンが続く！」みたいな状態にならない

[sds-page]

ツリーの中ではこれが一番正確。細かいデータの正確性が求められる場面ではルールベースのAIとDBを接続してデータを引っ張って来るべき