東ロボくんの生みの親《新井紀子》教授の間違いが明らかになった日。人間は人工知能に読解力でも負けつつある - Togetter

sangmin.eth | Dify Ambassador @gijigae アリババの人工知能チームが @Stanford 大学の読解力テストで人間に始めて勝ったのが、今年の1月。スコアは、 ・人：82.304 ・AI：82.44 グーグルの《BERT》でトレーニングさせた人工知能のスコアは何と、87.433！10カ月で5ポイントも上げている。人間とマシン、読解力の差は今後更に広がる🤖。 twitter.com/GoogleAI/statu… Google AI @GoogleAI We have released @TensorFlow code+models for BERT, a brand new pre-training technique which is now state-of-the-art on a wide array of natural language ta

[zenito9970]

東ロボについては、手法が公開された時点で「なんでこんな古くさいアホみたいな手法使っといて先端について発言してんの」みたいな反応だったでしょ(´･c_･`)...

[timetrain]

この業界、半年前の常識が巨人たちにぼんぼんひっくり返されている気がする。ただ、日本語の読解の研究を東大がブレイクスルーできなかったという「結果」は嫌なものだなと思う。

[bohemian916]

学習済みモデルがそれっぽい答えを統計的に出してるだけで「AIが意味を理解する」というレベルには程遠いんだよなぁ。それを踏まえて、なぜ人は理解しているのか、本当に理解できているのかという話で。

[aflske]

新井は自身の低い技術力で東大合格の目標達成できなかったのに、あたかもAIにはまだ無理〜とか、日本の教育は〜みたいに逃げたのが気にくわない。とわいえ最近のNLP界隈発展が早すぎてELMoもBERTも追え切れていない。。

[aike]

東ロボくんは、プロジェクトがある程度進んでからディープラーニングが突然登場して世界を変えちゃったのが悲劇だった。2012年以降にプロジェクト開始していたら座組も手法もああはならなかったと思う。

[yas-mal]

新井紀子氏については、断念当時も「なんだかなぁ…」という感想を持った記憶があるので、やっぱりもって「なんだかなぁ」が継続中なのです。／↑「嘘か」の論点は、過去の批判も踏まえるべきかと。 b:id:entry:347214135

[siuye]

嘘と言うのには流石に悪意ある。と思ったらタイトル変わってた。

[kenchan3]

荒井氏は急に発言が表に出てきて教育、政治に関わるようになって胡散臭いよね。 まあDL界隈の技術の進歩が急すぎるのもあるだろうが

[tomo31415926563]

東ロボくん、ディープラーニング使ってないし、研究規模もかなり小さかったので必要以上に過大評価も過小評価もしてはいけないよ。

[room661]

この記事をまとめた人の読解力が心配。新井教授が著書で展開した問題意識はそこではない。まとめ主の誤謬によって新井教授の問題意識の正しさがますます強化されているという皮肉よ。

[geopolitics]

東大ロボは一世代古い技術ということか。将棋もボナンザが出て一気に強くなった。指摘されているように本筋は教育であって人工知能は蛇足。

[paravola]

（「原理的に本質的な読解」とは）アリババの人工知能チームが読解力テストで人間に始めて勝った。差は今後更に広がる

[filinion]

AIの発達が予想以上に早い、というのは、おそらく喜ぶべきことなのだろう…。

[ktakeda47]

「嘘」「大げさ」「紛らわしい」で一蹴するのもまた違う気が🤔

[t-murachi]

BERTなら東大行けるん? 個人的には教授叩いてマウントしてる場合じゃないと思うんだけど。

[Dragoonriders]

新井紀子の胡散臭さは「自分のプロジェクトのAIは」と言わないで「AIは」って主語を多用して世間に安全神話的誤解を振りまいたからだよ。ブレイクスルーを目指して研究する方に焚きつけないからダメダメなんだろ？

[goldhead]

読解問題に対する解答であれば人工知能が優ることもあるだろう。問題は、手垢のついた言葉である「クオリア」とかいう胡散臭い領域についてどうなのだろうか、ということになるのかな、と素人考え。

[k-takahashi]

　BERTの解説探さないとなあ。

[anigoka]

やっと新井紀子が”正当に”評価された　あんな女モギケンに行政や教育にタッチさせんなよ

[deztecjp]

そのAIも、相変わらず「言葉の意味」は理解していない。「理解抜きでも、もっと点数は上がる」としても、「研究者の仕事」としては、方向転換はむしろ遅かったくらい。教育への関心のシフトは個人の勝手かと思う。

[zyzy]

うーんどこに読解力の定義を置くかにもよるけど……少なくとも翻訳がすらすらした言葉として出来ない間は、まだまだかな、と思う。

[aneet]

なるほどわからん。とりあえず自然言語処理の分野でAIはまだまだって言われてたのが予想以上の進歩であっという間に覆されたってことで良いのかな？なんか最近の技術進化の流れが速すぎてついていきかねてる。

[kesyomota]

まとめ的まなざし。まとめ的消費。

[hattake]

弱点を見つけたらここぞと叩きにかかる性質は、どうかなと思う。新井さんの先見性にまずい所はあったと思うが、「一定の確率で人間の読解力は壊滅的」という指摘は今でも健在だと思うんだけど。

[fujixe]

東大の編入試験に合格でもしたのかな。

[mojisan]

なんだかな〜

[arakik10]

昨年6月の僕のブクマコメントは正しかった「AIを使うスキルが悪かった、研究機器の性能やデータが不足した…という結論ではなく、AIでは無理という結論は論理的ではない」http://b.hatena.ne.jp/arakik10/20170603#bookmark-339472366

[kyukyunyorituryo]

BERTのサンプルを見たらプロジェクト・グーテンベルクだったが、使ってたのwikipediaだったのか。

[monmon225197810]

いやまあ、研究とか技術なんてそんなもんでしょ。新井さんの功績は読解力ってものの人間のばらつきを明確に調査・提示した点だと思うよ。機械学習の発展とはまた別物。

[nisisinjuku]

東ロボ、実は伸びしろが有るけど、自分以外の人が功績を東ロボで挙げるのは不服とか、自分の思いつくものが全てと限定した場合やり尽くしたとかそういうことなのかな？

[sc_watcher]

リアリティを共有云々の辺りから、ちょっと……という感じがしてる。

[toaruR]

死屍累々だからこそより光り輝く金字塔(*´д｀*)

[tanayuki00]

キタ！

[zackey2001]

真っ当なメディアなら新井氏に取材して議論を進めることができるのに、まとめはまとめでしかないという壮大な空回り。

[sunin]

自分はどうなってしまうのかという心配は激しくあるが、知的労働の分野にAIが入りんだ時、世の中どんなふうに変化するのか見てみたい。

[fukken]

タイトルは新井氏の主張と全く矛盾していないのだが、 @virtual2real299 とかいう読解力のないアホは何を以って間違いと主張しているのだろう。新井氏が自分のAIは未来永劫負けないなどと主張していた記憶はないのだが。

[NEXTAltair]

この結果を以て新井紀子批判は結果論すぎる

[taruhachi]

そろそろチューリングテストに通るAIが出てきて、そこに人格や魂があるかを真剣に議論しなければならない時代がやってきたね。

[rti7743]

技術が進歩した結果だろう。10年ぐらい前ぐらいは意味解析は無理ゲーだと思っていたし。将棋も囲碁も人をまだ超えられないだったし。アルゴリズムとそれを実現できるハードウェアが驚異的な進化をした結果だろう。