知識の蒸留から自己知識の蒸留へ: 正規化された損失とカスタマイズされたソフトラベルによる統一されたアプローチ

政治と経済カテゴリーの変更を依頼記事元:

arxiv-check-250201.firebaseapp.com

1 userがブックマークコメント

コメント

1

記事へのコメント1件

注目コメント
新着コメント

arxiv_reader 知識蒸留 (KD) は、教師の予測ロジットをソフトラベルとして使用して学生を導きますが、自己 KD はソフトラベルを要求するために実際の教師を必要としません。この作業では、一般的な KD 損失を正規化

2023/07/18 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

知識の蒸留から自己知識の蒸留へ: 正規化された損失とカスタマイズされたソフトラベルによる統一されたアプローチ

ブックマークしたユーザー

arxiv_reader2023/07/18

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - 政治と経済

いま人気の記事 - 政治と経済をもっと読む

新着記事 - 政治と経済

新着記事 - 政治と経済をもっと読む

設定を変更しましたx