大規模言語モデルが中規模な感じになってきてて進展がすごいな

touhousintyakutouhousintyaku のブックマーク 2023/03/26 20:55

その他

このブックマークにはスターがありません。
最初のスターをつけてみよう!

完全フリーで3GBのVRAMでも超高速に動く14B大規模言語モデルRWKVを試す|shi3z

    Transformerは分散できる代償として計算量が爆発的に多いという不利がある。 一度みんなが忘れていたリカレントニューラルネットワーク(RNN)もボケーっとしている場合ではなかった。 なんと、GPT3並の性能を持つ...

    \ コメントが サクサク読める アプリです /

    • App Storeからダウンロード
    • Google Playで手に入れよう