2024年3月1日のブックマーク (2件)

  • EVがこれほど期待外れになった経緯とは

    昨年のロサンゼルスモーターショーに登場したフォードの電動マッスルカー「マッハE」/Josh Lefkowitz/Getty Images (CNN) 米電気自動車(EV)メーカー、テスラは大幅値下げを断行した。フォードも電動マッスルカー「マスタング・マッハE」の価格を引き下げ、さらにEVピックアップの生産を縮小した。ゼネラル・モーターズ(GM)はプラグインハイブリッド車(PHV)の生産再開を検討中で、純粋なEVに軸足を移すとした当初の取り組みから後退するかもしれない。 しかもここへ来て米環境保護庁は、自動車メーカーに対しEV販売増を求める要件の緩和を検討している。従来積極的に進めていた脱ガソリン車、脱SUV(スポーツ用多目的車)からの転換を示唆する動きだ。 まずはっきりさせておこう。米国のEV市場は崩壊しているわけではない。コックス・オートモーティブによると、 2023年10~12月期のE

    EVがこれほど期待外れになった経緯とは
    tkslimee
    tkslimee 2024/03/01
  • 驚異の1ビットLLMを試す。果たして本当に学習できるのか?|shi3z

    昨日話題になった「BitNet」という1ビットで推論するLLMがどうしても試したくなったので早速試してみた。 BitNetというのは、1ビット(-1,0,1の三状態を持つ)まで情報を削ぎ落とすことで高速に推論するというアルゴリズム。だから正確には0か1かではなく、-1か0か1ということ。 この手法の行き着くところは、GPUが不要になり新しいハードウェアが出現する世界であると予言されている。マジかよ。 https://arxiv.org/pdf/2402.17764.pdf ということで早速試してみることにした。 オフィシャルの実装は公開されていないが、そもそも1ビット(と言っていいのかわからない,-1,0,1の三状態を持つからだ。 論文著者はlog2(3)で1.58ビットという主張をしている)量子化のアルゴリズム自体の研究の歴史は古いので、BitNetによるTransformerの野良実装

    驚異の1ビットLLMを試す。果たして本当に学習できるのか?|shi3z
    tkslimee
    tkslimee 2024/03/01