NVIDIA、エージェントスキルの効果を測る「SkillEvaluator」をオープンソースで公開 | gihyo.jp

NVIDIA⁠⁠、エージェントスキルの効果を測る「SkillEvaluator」をオープンソースで公開 NVIDIAは2026年8月19日、AIエージェントに特定の作業手順やツールの使い方などを教えるエージェントスキル（Agent Skills、以下スキル）の効果を測定する「NVIDIA SkillEvaluator」をオープンソースで公開したことを紹介した。同じタスクをスキルあり・なしの2条件で実行し、結果の差を「Skill Lift」として算出する。自社製品向けの300以上のスキルを対象にした評価では、正確性が平均41ポイント向上した。ライセンスはApache License 2.0で、ソースコードはGitHubから入手できる。 Evaluating AI Agent Skill Performance with NVIDIA SkillEvaluator - NVIDIA Techn

[misshiki]

NVIDIAがAgent Skill評価OSS「SkillEvaluator」を公開。スキル有無の差をSkill Liftで測定し、300超のスキルで正確性46→87点。安全性・重複・実エージェント性能を3段階で評価。