加熱するLLM開発競争に冷や水、オープンモデルの組み合わせだけでGPT-4o越えの事実
加熱するLLM開発競争に冷や水、オープンモデルの組み合わせだけでGPT-4o越えの事実 2024.06.21 Updated by Ryo Shimizu on June 21, 2024, 18:19 pm JST 世界中の企業や政府が狂ったようにNVIDIAのGPUを買い漁る流れはそろそろ潮時かもしれない。 いくつかの興味深い事象が起きているからだ。 昨日発表されたKarakuri社のLLM、「KARAKURI LM 8x7B Instruct v0.1」は、非常に高性能な日本語LLMだ。Karakuri社は今年の一月にも非常に高性能な70Bモデルを引っ提げて業界に旋風を巻き起こした。この最新のLLNは、日本語向けオープンLLMとしては初の「命令実行」チューニングを施されている。それだけでなく、RAGと呼ばれる、複数の知識を組み合わせてより正解に近い答えを導く技術や、Function
1ビットLLMの衝撃! 70Bで8.9倍高速 全ての推論を加算のみで!GPU不要になる可能性も
1ビットLLMの衝撃! 70Bで8.9倍高速 全ての推論を加算のみで!GPU不要になる可能性も 2024.02.28 Updated by Ryo Shimizu on February 28, 2024, 16:46 pm JST 2月は中国では春節というお正月があり、春節にはみんな休む。 それもあってか、12月から1月にかけて怒涛の論文発表が行われて毎日「デイリーAIニュース」を配信している筆者は忙殺されていた。 春節中にはOpenAIがSoraを、GoogleがGemini1.5を発表したのは、その合間を縫ってのことだった。もはやAI最前線の戦いは研究が行われる場所の文化や風土に影響を受けるところまで来ている。 そして春節もあけた今週、さっそくAlibabaがとんでもないトーキングヘッドモデルを引っ提げて登場したかと思えば、Microsoftの中国チームがとてつもないLLMをリリース
なぜ、微積分は役に立つのか
なぜ、微積分は役に立つのか 2023.11.27 Updated by Atsushi SHIBATA on November 27, 2023, 14:58 pm JST 今回紹介する書籍：『はじめての物理数学』永野 裕之（SBクリエイティブ、2017） 朝起きてから寝るまで、我々は何種類もの「数」を見ます。 私自身、朝起きるとネットやニュースで降水確率、予想気温のように気象にかかわる数、為替、海外の株式市場の指数など、いろいろな種類の数をチェックします。しばらく前なら、コロナウイルスの感染者数や増加傾向を表す指数を毎日のように確認していました。 自分を取り巻く環境を知るために、私たちはいろいろな「数」を確認します。そして数を手がかりにして、行動を決めます。現代を生きる私たちにとって「数」は、世界を知るための「目」としての役割を持っています。 現代人が日常的に見るこの種の数は、たいてい計
AIもうええわい
AIもうええわい 2023.04.16 Updated by Ryo Shimizu on April 16, 2023, 03:24 am JST むかし、僕がいた業界は「ドッグイヤー」と呼ばれていた。 犬のように歳をとるのがはやいという意味だが、ドッグイヤーの感覚に慣れた僕にとっても、最近のAI関係のニュースの多さ、進歩の速さは異常だし疲れてきた。 この連載も、「一ヶ月くらい書いてないのでは」と思って確認すると、今月の頭に書いていた。まだ二週間しか経ってない。 何か書こうと思って、とりあえず何かタイトルを適当に打ち込もうとすると、「AIもういいわい」というフレーズが浮かんだ。 こんなこと誰かが先に言ってそうだなと思って検索すると、あんまり見つからなかったから、いまのうちに書いておくことにする。 最近のAI業界の進歩を映画業界に例えると、毎週スターウォーズが公開されているような状況である
NVIDIA、過去に国立研究機関へのGeForce導入妨害の疑い
NVIDIA、過去に国立研究機関へのGeForce導入妨害の疑い Amazing, every word of what you just said was wrong. 2017.12.20 Updated by Ryo Shimizu on December 20, 2017, 06:24 am JST 昨日の記事に対し、NVIDIAからヒステリックといえるほどの対応が起きました。不思議です。明らかに意図的に動いているのに、公表されている事実を指摘しただけなのにこの反応は不可解ですね。 NVIDIA側からは、「個別に面談して誤解を晴らしたい」という連絡を頂きましたが、そもそもなぜ個別に面談する必要があるのでしょうか。筆者のもとにはNVIDIAからGeForceの供給を止められている、という代理店の話も聞こえてきます。水面下でコトを落ち着かせたいということなのでしょうか。 また、海外には
もうすぐ絶滅するという開かれたウェブについて
もうすぐ絶滅するという開かれたウェブについて This is Not the End of the Open Web 2016.08.22 Updated by yomoyomo on August 22, 2016, 10:31 am JST すっかり旧聞に属しますが、Internet Archive が主催し、これからのウェブのあり方を議論するイベント Decentralized Web Summit が6月に開かれました。 このサミットには "Locking the Web Open" というサブタイトルが付いていますが、逆に言えば、主催者には現在のウェブはオープンではないという認識があるわけです。それにいたる流れを少し辿りたいと思います。 そもそも Open Web（オープンウェブ、開かれたウェブ）という言葉が特に言及されるようになったのは、2010年だったと記憶します。その背景の
ショートカットキーはマウスより遅い - WirelessWire News
CTRL+Xでカット、CTRL+Vでペースト。 ショートカットキーの使い方を覚えると、パソコンの達人になったような気分になりますよね。 しかし、実際にはショートカットキーを使用すると、マウスでメニューから「編集」「ペースト」を選ぶよりも平均2秒も遅いのです。 「そんなバカな」 と思いますよね。 しかし、これはTogことブルース・トグナッツィーニがAppleでMacintoshの開発を担当した際に行った膨大な実験の結果、解ったことなのだそうです。 これはTogのWebページでも詳しく紹介されています。 しかし2秒とはとても信じられません。 むしろ逆のようにさえ感じます。 しかしTogの主張によれば、我々ユーザはショートカットキーを選ぶのに2秒かかっているものの、ショートカットにたどり着くまでの時間を喪失している、つまりプチ記憶喪失状態になっているというのです。 こんな不思議な話が、慶應
起業の能力と経営の能力は全く異なるスキル - WirelessWire News（ワイヤレスワイヤーニュース）
最近、いくつかの案件をこなすなかで、様々な学術研究プロジェクトの事業性を評価して欲しい、という依頼がありました。これは会社の業務とは別で、個人的に依頼された仕事だったので、休日に家でやるしかないのですが、久しぶりに疲れました。 膨大な研究計画のそれぞれの妥当性を評価し、優劣をつけるわけですから、こちら側にも相当な負担がかかります。気分転換に散歩しよう、と思って近所にでかけたところ、ちょうど東京大学で五月祭をやっていました。 東京大学の五月祭では、模擬店やイベントだけでなく、研究室公開が行われています。 様々な技術的シーズが一同の元に展示されており、それを眺めるだけでもかなり楽しいのです。 この五月祭への参加は、私にとって年に一度の楽しみなのです。 そして様々な研究成果を見るうち、ふと起業と経営の能力はそもそも別物なのだということが実はあまり世間では理解されていないのではないか、と思った
弁当男子の何が悪いのか - WirelessWire News（ワイヤレスワイヤーニュース）
数日前から 「イクメン、弁当男子」は、なぜ出世できないか という記事がバンバン炎上しております。 はてなブックマークに生息しているはてぶ民も激怒、Togetterで日夜人様の独り言を読んでいる暇な人々も今回は激怒しております。 この記事は • 今の若いものは草食 • 今の若いものはガッツが無い • オレの時代はもっと大変だった という「団塊テンプレ」に沿って若い者の怒りのボタンを高橋名人真っ青な連打で押しまくって盛大に自爆しているわけです。 日本の若い者は • 非正規雇用とか貧乏リーマンで銭がないので弁当男が多く • お金がないので外食なんて無理で • 非正規雇用の人は正社員の輪の中になんて入れてもらえないし • 非正規雇用はいつ首になるかわかんないし • 就職は今の方が遥かに大変だし • 就職できても給料は上がらないばかりかカット • 安給料でサービス残業でブラック労働恒
オリンピックなんだけど警備員雇うの忘れてたごめん - WirelessWire News（ワイヤレスワイヤーニュース）
オリンピックが全然盛り上がってないロンドンです。 開始まで二週間切りました。 が、ここはイギリスです。期待を裏切らない祭りが多数発生してございます。まるで夏休みの宿題が８月31日になっても終わらない小学生状態です。 祭り１：警備員雇うの忘れてました事件 オリンピックは世界中からろくでもない人々が集まってくるから警備を厳しくしなければいけない、というのがイギリス政府の前提です（最初から誰も信用しておりません） しかし、イギリス政府、勤労意欲のない自国の警察や軍隊じゃ警備員がたりないから、ということでG４なるマックの新機種のような名前の警備会社に警備員の採用と管理を外注しておりました。 ところが、オリンピック２週間前になり「ごめん。間に合わなかった。約束した人数雇ってないの知らなかったの。応募者は一杯いたんだけど、うーん、なんでかなあ、雇うの忘れてたのね。悪いけどオタクの軍隊でどうにかしてよ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
