なるほど重み行列を{-1, 0, 1}の3値に置換するということか。1.58bits = log2(3) ってことね。

georgew のブックマーク 2024/03/03 21:42

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4749931919022301728/comment/georgew" data-user-id="georgew" data-entry-url="https://b.hatena.ne.jp/entry/s/wirelesswire.jp/2024/02/86094/" data-original-href="https://wirelesswire.jp/2024/02/86094/" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fwirelesswire.jp%2F2024%2F02%2F86094%2F" data-user-icon="/users/georgew/profile.png">1ビットLLMの衝撃! 70Bで8.9倍高速　全ての推論を加算のみで!GPU不要になる可能性も</a><br><p style="clear: left">なるほど重み行列を{-1, 0, 1}の3値に置換するということか。1.58bits = log2(3) ってことね。</p><a class="datetime" href="https://b.hatena.ne.jp/georgew/20240303#bookmark-4749931919022301728"><span class="datetime-body">2024/03/03 21:42</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！