サクサク読めて、アプリ限定の機能も多数!
“15Tトークンからなる高品質なデータセットであるFineWebの作成方法を解説した記事”
misshiki のブックマーク 2024/06/03 15:30
Shion Honda on X: "15Tトークンからなる高品質なデータセットであるFineWebの作成方法を解説した記事。重複削除の方法や各種フィルタについて対照実験を行うことで、CommonCrawlから学習効率の良いサンプルを抽出した。 🍷 FineWeb: decanting the web for the finest text data at scale https://t.co/b0itUa30jk https://t.co/hfTixHrvHw"[オープンデータ][自然言語処理]“15Tトークンからなる高品質なデータセットであるFineWebの作成方法を解説した記事”2024/06/03 15:30
このブックマークにはスターがありません。 最初のスターをつけてみよう!
x.com2024/06/03
1 人がブックマーク・1 件のコメント
\ コメントが サクサク読める アプリです /
“15Tトークンからなる高品質なデータセットであるFineWebの作成方法を解説した記事”
misshiki のブックマーク 2024/06/03 15:30
このブックマークにはスターがありません。
最初のスターをつけてみよう!
Shion Honda on X: "15Tトークンからなる高品質なデータセットであるFineWebの作成方法を解説した記事。重複削除の方法や各種フィルタについて対照実験を行うことで、CommonCrawlから学習効率の良いサンプルを抽出した。 🍷 FineWeb: decanting the web for the finest text data at scale https://t.co/b0itUa30jk https://t.co/hfTixHrvHw"
x.com2024/06/03
1 人がブックマーク・1 件のコメント
\ コメントが サクサク読める アプリです /