背景 大規模言語モデルへのアクセス問題 ※以下の情報は本論文執筆時点での研究者らによる記述に基づいています。 2023年3月14日、OpenAIはGPT-4をリリースしました。専門的、学術的なタスクで人間レベルのパフォーマンスを達成する大規模言語モデル(LLM)です。しかし、GPT-4のアーキテクチャ、ハードウェア、データセット構築、訓練方法に関する詳細情報はほとんど開示されていません。 GPT-4は、インターネットインターフェースを通してのみアクセス可能であり、ポリシーは厳しく制限され、またいくつかの地域では地政学的な問題などから利用できないといった状況が生まれています。加えて、GPT-4は特定のクエリに対して「AI言語モデルとしては回答できない」という形式でしか応答しません。 以上の状況から、一部からは透明性とアクセシビリティに関する懸念や不満が生じています。 オープンソースへの動き
![オフラインで動作する様々なオープンソースLLMのインタフェース『GPT4All』が開発され公開 | AIDB](https://cdn-ak-scissors.b.st-hatena.com/image/square/a36a730a9c5c9b63371c4d91d5c5290ecb5f772e/height=288;version=1;width=512/https%3A%2F%2Faiboom.net%2Fwp-content%2Fuploads%2F2023%2F11%2FAIDB_58916.jpg)