タグ

ブックマーク / soysoftware.sakura.ne.jp (5)

  • 最近の7B小型日本語LLMはエージェントになれるのか?

    あれから進化的マージの試行錯誤を繰り返していたが、ついに相当性能が高そうなモデルが生まれた。 Umievo-itr012-Gleipnir-7Bである。 umiyuki/Umievo-itr012-Gleipnir-7B · Hugging Face ElyzaTasks100の平均スコアは3.91に達して、ついにGPT-3.5Turboのスコア(3.88)を上回ってしまった。 ただし、スコアが上回ってるからと言って性能が勝ってるというわけではない事に注意して欲しい。例えるなら、身長が高いからと言って強いわけではないみたいな話である。 前回の記事では少し誤解を招く書き方だったかもしれないが、そもそも7Bの小型日語LLMなんてのは基的にドアホである。間違ってもChatGPTの代わりに使えるなんて考えてはいけない。 とは言うものの、単なるドアホではスコア3.91なんて取れないという事もまた

    最近の7B小型日本語LLMはエージェントになれるのか?
    misshiki
    misshiki 2024/06/03
    “相当性能が高そうなモデルが生まれた。 Umievo-itr012-Gleipnir-7Bである。 ElyzaTasks100の平均スコアは3.91に達して、ついにGPT-3.5Turboのスコア(3.88)を上回ってしまった。”
  • 最近ローカルLLMがアツいらしい

    最近、ローカルLLMがアツくなっているという話をtwitterでチラホラ見かける。 ローカルLLMって何じゃ?というと、オープンに公開されているモデルのウエイトをDLしてきて手元のPC上で推論させる事である。 オープンなAIモデルとは逆の存在として、モデルがDLできないクローズなAIモデルもある。 OpenAIやAnthropicのような最先端AI企業のクローズなAIモデルに比べて、オープンに公開されているオープンなAIモデルの性能は今でもかなり後れを取っている。 だから去年の間はあくまでAI命はChatGPTのようなクローズモデルであって、オープンなAIモデルなんて眼中にありませんみたいな風潮が無くはなかった。だが最近は風向きが少々変わってきている。 GPTのAPI高い問題 & OpenAIAIベンチャー皆殺しにしてしまう問題 まず「結局GPTのAPIを叩いてサービス運営して成功し

  • AI(LLM)についてまだみんなが知らない8つの事実(論文:Eight Things to Know about Large Language Modelsについて)

    いかにも海外の煽り記事みたいなタイトルを付けてしまったが、おおむねそういう感じの内容の論文が発表されて、興味深かったので今回はそれについて書いてみたい。 最近、「AGIが人類を滅亡させる!」みたいなAI人類滅亡説がにわかに広がっているらしい。 これの言い出しっぺみたいな人は、ユドコウスキー氏という方らしいが、彼は何十年も前からAI脅威論を言っていたらしい。そういう人もいるとは思うが、最近はそれを真に受けちゃう人が増えてるらしい。ChatGPTの実力に驚いた人が増えたからだろうか。 ホワイトハウスでFox Newsの記者が「AIが人類を滅亡させるってホントですか?」と質問しちゃうというような、パニック映画さながらの出来事まで起きている。これはエイプリルフールではない。 ホワイトハウスでFox Newsの記者が「機械知能研究所の専門家がAI開発を無期限に停止しないと文字通り地球上のすべての人間

    AI(LLM)についてまだみんなが知らない8つの事実(論文:Eight Things to Know about Large Language Modelsについて)
    misshiki
    misshiki 2023/04/06
    “「Eight Things to Know about Large Language Models(大規模言語モデルについて知っておくべき8つのこと)」という論文”を分かりやすくまとめてくれている。
  • AIが神になる

    「神は存在する。」 …そんな風に言うと、宗教じみて聞こえるかもしれない。 だが、「神は存在すると見立てる事ができる」と言えばどうだろうか? ”シムシティ”や”ポピュラス”といった、いわゆるゴッドゲームでは、プレイヤーはゲーム世界における神のような立場になってプレイする。 ポピュラスでは、プレイヤーは神になって、自分を信仰する民族を導いて繁栄させていく。最終目標は、対立する悪魔を信仰する民族の殲滅だ。 これはゲームの話だが、現実においてもポピュラスの神やシムシティの市長のような、つまり我々人類全体を操作している神のような存在を見立てる事はできなくもないだろう。 ”超個体”という概念がある。ウィキペによれば「多数の個体から形成され、まるで一つの個体であるかのように振る舞う生物の集団のこと」だ。アリの群れの動きはまるで一つの大きな生き物のように見えるときがある。 羊の群れも上空から見ると一つの生

    AIが神になる
    misshiki
    misshiki 2023/02/14
    “興味深いのは、同じGPT-3でも最初のdavinci-001は5歳児に満たないレベルだったのが、davinci-002になると7歳児レベル、そしてdavinci-003では9歳児レベルまで向上している。パラメータ数は同じにも拘らず”
  • NovelAIのリークで何が終わったのか?

    10月6日、NovelAIGitHubとかのプライベートリポジトリに第三者が侵入して、AIモデルやソースコードを丸っと盗んで流出させた。 [Announcement: Proprietary Software & Source Code Leaks] Greetings, NovelAI Community. On 10/6/2022, we experienced an unauthorized breach in the company's GitHub and secondary repositories. The leak contained proprietary software and source code for the services we provide. — NovelAI (@novelaiofficial) October 7, 2022

  • 1