2024年5月14日のブックマーク (3件)

  • Embeddingモデルを使ったベクトル化のしくみ、fine-tuning手法を解説

    自己紹介
 • 名前
 ◦ 早野 康太
 • お仕事
 ◦ 自然言語モデルの改善 • 今期期待のアニメ
 ◦ ユーフォ、無職転生、夜のクラゲ
 このすば、ガールズバンドクライ
 • 最近の映画
 ◦ デデデデおもろかったです
 ▪ 幾田りら声優うまスンギ
 ▪ 原作もバチクソ良かった
 • 今後の映画
 ◦ ウマ娘、ぼざろ、デデデデなど アジェンダ
 • Transformerモデル
 ◦ Attentionについて
 ◦ CLS, mean pooling
 • fine-tuningについて
 ◦ Contrastive Learning
 ◦ データセットのつくりかた
 • 世のEmbeddingモデルたちはどうしてるか
 ◦ m-E5
 ◦ E5-mistral-7b-instruct
 ◦ BGE
 • Embeddingモデルの応用
 ◦ RAGとかStable Diffusi

    Embeddingモデルを使ったベクトル化のしくみ、fine-tuning手法を解説
    kusomamma
    kusomamma 2024/05/14
  • 私たちが日本語を「外国語」として学びなおしたら…いったい何が起きる?(佐々木 敦)

    私たちが日語を「外国語」として学びなおしたら…いったい何が起きる? 【新連載「ことばの再履修」第1回】 思考家/批評家/文筆家の佐々木敦さんによるWEB連載「ことばの再履修」が待望のスタート。初回は「自分のことばを他人の目線で見つめてみる」ことについて。「ことば」の講義が始まります! 「マイナー言語:日語」の使用者として これから「ことば」について皆さんと考えていきたいと思います。 「ことば」というのは、さしあたり、いま私が書いている、そして皆さんが読み進めている、この文章を構成している言葉、すなわち「日語」のことです。つまりこれは「日語ということば」についての講義です。 しかしこのことは、たまたま私が日語という言語の使用者だから、日語が主に用いられている環境で生まれ育ち、今も生活しているからであって、もしも英語の環境に生まれていたならば、この講義は「英語」についてのものになっ

    私たちが日本語を「外国語」として学びなおしたら…いったい何が起きる?(佐々木 敦)
    kusomamma
    kusomamma 2024/05/14
  • 「最悪の業績なのに1億円の売り上げを手放してまで楽天市場から撤退する話」を読んだら刺さりすぎて動けなくなった

    リンク note(ノート) なぜ、最悪の業績なのに年商の20%にもあたる1億円の売上を手放してまで楽天市場から退店するのか|鷲尾 岳 / ワシオ株式会社 3代目社長 【はじめに】 ・自己紹介 こんにちは。 今年の1月にワシオ株式会社(以下ワシオ)の代表取締役社長に就任しました、三代目の鷲尾 岳(ワシオ タカシ)と申します。 鷲尾家の次男坊として1991年2月10日に生まれ、小学校5年生までは地元の公立、小6から私立の学校に転校し、中3までは福井県、高校は和歌山県にある姉妹校にて寮生活をしていました。 ここで詳しくは書きませんが、その学校の特徴として、「義務教育は最低限」「校則は生徒が主になって話し合って決める」「1年を通して大半のコマを占める”プロジェクト”という授業 1009 users 744 鷲尾 岳@もちはだ @washio_takashi 世界から「寒い」をなくしたい / 91’

    「最悪の業績なのに1億円の売り上げを手放してまで楽天市場から撤退する話」を読んだら刺さりすぎて動けなくなった
    kusomamma
    kusomamma 2024/05/14