人だと正解率92％なのに、GPT-4だと15％になる新型テスト集「GAIA」 米Metaなどが開発
このコーナーでは、2014年から先端テクノロジーの研究を論文単位で記事にしているWebメディア「Seamless」（シームレス）を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 Twitter: ＠shiropen2 米Metaや米HuggingFaceなどに所属する研究者らが発表した論文「GAIA: a benchmark for General AI Assistants」は、難しいタスクではなく、人間にとって簡単なタスクを達成する大規模言語モデル（LLM）を評価するためのベンチマークを提案している。この研究は、人間が日常で当たり前に実行してほしいタスクを正確にこなすLLM構築を目指すためのテスト集である。 現在のベンチマークは、人間にとってより困難なタスクを求めており、LLMには数学や法律などの複雑なタスクや、一貫性のある本を書くなどの複雑な課題が
後部座席の頃
高校の国語の教科書に、ピーナッツの作者の話が載っていた。 その文章がどんなだったかはもうほとんど覚えていないけれど、挿絵として載っていた漫画でチャーリーブラウンが言っていたことは今でもふとしたときに思い出す。 大雑把にまとめると、「安心」とは車の後部座席で眠れる状況のことで、そしてそれはある日突然、永遠に失われる、みたいな内容だった。 私は昔から車に乗ればすぐ眠れる性質だったので、これを読んだ当時はなるほどなぁとすごく共感した。 家族で遠出した際、一人っ子だったために独占状態だった後部座席で横になり、夜のラジオを聴きながらブランケットにくるまってうとうとする時間が大好きだった。 でも、高校生の私も、横になれこそしないもののまだまだ車内では眠らせてもらえる存在で、それが「永遠」に失われるとはどういうことなのか、実感としては分かっていなかったのだと思う。 免許を取って数年は、まだ両親の運転する
市民権の申請、イスラエル支持の宣言が必要 独東部州
（ＣＮＮ） ドイツ東部ザクセンアンハルト州で市民権を申請する場合、申請者はイスラエルの生存権に対する支持を宣言することが必要となったことがわかった。 今回の新たな法律は、イスラム組織ハマスが１０月７日に越境攻撃を実施し、イスラエルとハマスの戦争が続くなかで制定された。 地元の通信社によれば、今回の法律は、イスラエルの生存権がドイツにとっての「国是」だとしている。 法律では、ドイツの市民権を取得するにはイスラエルの生存権に対する関与が必要だと説明。申請者は、イスラエルの生存権を認め、イスラエル国家の存在に反対するあらゆる取り組みについて非難することを書面で確認しなければならないとしている。 地元紙によれば、同州内相は州内の市や区に宛てた書簡の中で、市民権取得の過程で、反ユダヤ的な姿勢が存在する兆候があるかどうかに注意を払うべきだと指摘した。 書簡によれば、申請者が反ユダヤ主義的な犯罪やイスラ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
