[O] MeCab 用の新語辞書 mecab-ipadic-neologd を公開しました

MeCab 用の新語辞書 mecab-ipadic-neologd を公開しました Tweet [NLP] 日本語の文書を機械的に処理しようと思った時に、ほとんどの人が MeCabとIPADIC(IPA辞書)の両方、または、どちらかを使うことになります。 IPADICはとてもよく出来ていますが、更新されないまま年月が過ぎているので、例えば2015年3月上旬に急に流行ったような言葉は収録していません。そのため、今日生まれたような新しい文書(例、Apple Watch発売)を解析する時に困ります。困らない人もいますけど、僕は困ります。 その課題に対処するために、日本全国津々浦々、自然言語処理に関わる全ての人は独自にMeCabの新語辞書を作って対応しているわけです。その際に元データとして使われることが多いのは Wikipedia 日本語版やはてなキーワードなどです。 困ったことに、新語辞書を生成

[overlast]

公開しました。ぜひお試しください。

[mrkn]

こういう「キログラム原器のメンテナンス」みたいな重要な仕事をしている人をもっと称えていきたい。

[hadzimme]

すごくデーモンっぽい名前だ

[midnightseminar]

MeCabの新語辞書

[tmatsuu]

ほう

[fufufukakaka]

今更知った。ありがてぇ。。。

[Chocolat520]

すごい、素晴らしい　学生時代に出会っていたかった

[yoyama]

“新語”

[buzztaiki]

素晴らしすぎる。

[june29]

プログラマの世界でそうなってきたように、研究者の世界でも、知見やデータやノウハウの共有がラグなしで進行していくといいな (研究室時代の自分へ)

[programmerMOT]

“元データとして使われることが多いのは Wikipedia 日本語版やはてなキーワードなどです。”

[likk]

ありがたやありがたや

[Nyoho]

これははかどります! 自分ではてなキーワードなどからやろうとしていました。ありがとうございます!

[shinagaki]

素晴らしい。今まで公開されているIME辞書使ってたけど、変換のコスト高いから頻繁にできなかった

[efcl]

"MeCab のシステム辞書の一つである IPADIC を拡張するための新語辞書のシードと、新語辞書を組み込んだIPADICをインストールするツール群のセット"

[muddydixon]

素晴らしい仕事だ！！！

[Lycoris_i]

素晴らしい

[gumkam]

ありがたい

[chezou]

これは偉業だ…

[yusuke_1031]

ありがたや

[keitone]

うわやんなきゃ

[nicht-sein]

あとで試してみよう

[hinashiki]

絶賛に値する

[send]

めっちゃありがたい！

[key_amb]

長らく更新されてない mecab-ipadic の辞書を刷新できるらしい / [O] MeCab 用の新語辞書 mecab-ipadic-neologd を公開しました /

[progrhyme]

長らく更新されてない mecab-ipadic の辞書を刷新できるらしい / [O] MeCab 用の新語辞書 mecab-ipadic-neologd を公開しました /

[RabbitBit]

ありがたい。

[asuka0801]

おお、便利

[kivantium]

ありがたい。「なのは」がどう解析されるか後で試そう。→試したらちゃんと出来た！すごい！(http://kivantium.hateblo.jp/entry/2015/03/15/175612)

[koda3]

後で試そう

[T-miura]

これ、シード側(wikipediaのデータ取ってくるところとか、はてなキーワード抜く所、クロールとか)のコード、githubに置いてないよな・・・そっちのコードも見たかった・・・