タグ

NLPに関するshiishikのブックマーク (2)

  • 日本語に特化した13億パラメータのGPT言語モデルを公開|rinna株式会社

    ~商用利用可能なライセンスで日語のNLPコミュニティに貢献~ rinna株式会社(社:東京都渋谷区/代表取締役:ジャン"クリフ"チェン、以下rinna社)は、日語に特化した13億パラメータのGPT言語モデルを開発し、公開しました。 ■背景 rinna社はこれまでに、日語の自然言語処理 (NLP) に特化したGPT (3.3億パラメータ) やBERT (1.1億パラメータ) の事前学習モデルを公開し、多くの研究・開発者にご利用いただいています。最近のNLPに関する研究では、モデルのパラメータ数が多いほど高い性能であることが知られています。 そこでrinna社は、これまでに公開してきたモデルより大規模な13億パラメータを持つ日語に特化したGPT言語モデルを開発し、日語のNLPコミュニティに貢献するために、この言語モデルをNLPモデルライブラリ Hugging Face に商用利用可

    日本語に特化した13億パラメータのGPT言語モデルを公開|rinna株式会社
  • SIGIR 2017に参加してきました - 株式会社ロンウイット

    溝口 泰史 著 2017年8月7日から8月11日の5日間新宿で開催された、情報検索分野トップカンファレンスのACM-SIGIR 2017に参加してきました。実際には初日はチュートリアル、最終日はワークショップなので、学会としては三日間でしたが、チュートリアル・ワークショップを含め、とても刺激的な五日間でした。 会場は京王プラザホテルで、JRの新宿駅からは地上にほとんど出ることなく行き来することができました。会期中雨の降ることが多かったので、この会場の立地はとてもありがたかったです。会場は5階、42階、43階になることが多かったですが、コーヒーブレイクやポスターセッションで立ち寄った43階の部屋からの眺望は曇天にもかかわらず遠くまで新宿を見渡すことができ、気分をリフレッシュすることができました。 一日の間にいくつもの発表を聞いており、全ての発表の感想はとても書ききれないので、以下は興味深いと

    SIGIR 2017に参加してきました - 株式会社ロンウイット
  • 1