2019: We need to talk about standard splits · Issue #241 · jojonki/arXivNotes
Kyle Gorman, Steven Bedrick. ACL 2019. Tweet: https://twitter.com/wellformedness/status/1130129820124368896 PDF: https://www.aclweb.org/anthology/P19-1267/ Podcastでも解説しました． https://anchor.fm/lnlp-ninja/episodes/ep32-We-need-to-talk-about-standard-splits-e457nd 概要 システム性能のランキングを行うために，一般的にはテストセットに対する評価結果が採用されている．しかしその結果が偶然によるものなのか，複数のtrain/testセットで結果は安定しているのか，これらに対する研究はほとんどない．我々は2000-2018における９つのPOSタガ
Realistic Evaluation of Deep Semi-Supervised Learning Algorithms
Semi-supervised learning (SSL) provides a powerful framework for leveraging unlabeled data when labels are limited or expensive to obtain. SSL algorithms based on deep neural networks have recently proven successful on standard benchmark tasks. However, we argue that these benchmarks fail to address many issues that these algorithms would face in real-world applications. After creating a unified r
グーグルが検索アルゴリズムを変更、不適切コンテンツを下位に
偽ニュースがインターネット上に蔓延している状況を受けて、Googleは、偽情報の検索や拡散をしにくくしたいと考えている。 Googleは米国時間4月25日、「より品質の高いコンテンツをウェブから拾い上げる」ために同社の検索エンジンの動作方法を変更すると発表した。同社の検索結果の約0.25％が「不快または明らかに誤解を招くコンテンツ」で、この状況を改善するために、検索結果のランク付け方法を変更するとともに、報告ツールをユーザーに提供することに着手するという。 Googleは、検索品質評価ガイドラインを更新してからのこの1カ月間、テスターらの協力を得て、偽ニュース、不快な検索結果、偽の陰謀説といった品質の低いコンテンツを排除した。同社は、評価者からのデータを収集済みで、それをランク付けアルゴリズムに適用することにより、偽ニュースが検索結果の中で下位に表示されるようにする。 Googleによると
はてなブログ | 無料ブログを作成しよう
思いは言葉に。 はてなブログは、あなたの思いや考えを残したり、 さまざまな人が綴った多様な価値観に触れたりできる場所です。
NPO法人DSS｜HOME：履修履歴の活用とは
経団連の「採用選考に関する指針」が改定されました 「採用選考に関する指針」の手引きには、採用選考における留意点として "大学等の履修履歴（成績証明書等）について一層の活用を検討することが望ましい" と「履修履歴の活用」に関する項目も追加されています 「履修履歴」活用の解説書が１２月１１日に出版！ 辻太一朗 著（出版：東洋経済新報社） 「履修履歴」面接 ―導入、質問、評価のすべて 「履修履歴」という言葉を生み出し「履修履歴の活用」について社会に提唱し続けてきた辻太一朗による、唯一の解説書です。是非お手にとってご覧ください。
大学の単位が格付けされる - Mizuno on Marketing
今日、ある方の Facebook 投稿で知って、いろいろ考えさせられた記事： 「できるビジネスマン」かどうかは高校の学力で決まる 著者の山崎元氏によれば、最近三菱商事や JT といった大企業が、就活生に、大学の授業の成績をネットを通じて提出させているという。それは、NPO 法人 DSS なる組織により、大学を超えて比較可能なように再評価されるという。 学生の成績評価という聖域に、企業の利益を代表する外部機関が入り込むことに反発する大学人は少なくないはずだ。大学は、企業好みの人材を育てる機関ではないと。多くの私立大学が「就職に強い」ことを売り物にしているのだが。 この話を聞いて、一流教授による講義を無料でオンライン配信している米国の組織を思い出した。その収入源は、世界中から優れた能力を持つ人材を見つけ出し、企業に紹介することらしい。学生の能力を発掘して売るビジネスといえる。 これまで大学は、
クラウドソーシングを用いた教師付き学習の凸最適化による定式化
It has attracted considerable attention to use crowdsourcing services to collect a large amount of labeled data for machine learning, since crowdsourcing services allow one to ask the general public to label data at very low cost through the Internet. The use of crowdsourcing has introduced a new challenge in machine learning, that is, coping with low quality of crowd-generated data. There have be
Interleavingについて - tsubosakaの日記
情報検索において検索手法の結果を評価する方法の手法の一つにInterleavingという方法がある。最近その辺についてちょっと読んでいたのでまとめておく。 検索エンジンにおいては何らかのRanking Function(http://en.wikipedia.org/wiki/Ranking_function)を用いて、与えられたクエリに対する検索結果を並び替える。 例えば"餃子 レシピ"というクエリでGoogleで今検索したところ 1. http://cookpad.com/recipe/316319 (☆ほっぺが落ちちゃう 餃子☆) 2. http://cookpad.com/category/836 (餃子・シュウマイ レシピ 306品) 3. http://matome.naver.jp/odai/2133424266153597701 (絶品餃子！！肉汁がやばい究極のギョーザのレ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Bootstrap Evaluation of Clusters | R-bloggers