中国語判定(というか除外)したいという話 - White scenery @showyou, hatena

テクノロジーカテゴリーの変更を依頼記事元:

showyou.hatenablog.com

14 usersがブックマークコメント

コメント

2

記事へのコメント2件

注目コメント
新着コメント

mangakoji へー、

2011/02/01 リンク

manabou 言語判定

language
nlp

2011/02/01 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

中国語判定(というか除外)したいという話 - White scenery @showyou, hatena

@penguinana_さんからもらったtweetの山解析してるんだけど、中には日本語だけじゃなくて中国語とか英語... @penguinana_さんからもらったtweetの山解析してるんだけど、中には日本語だけじゃなくて中国語とか英語も混ざってたりする。この辺解析するのは時間の無駄なので機械的にカットできないかと思った。この辺id:n_shuyoさんのlanguagedetect使って判定できると幸せなんだけど、tweetだと結構誤判定するのが残念なとこ。 http://code.google.com/p/language-detection/ でも中国語なら中国の簡体字弾くだけでも結構減らせるかなぁって。そしたらid:takeda25さんが↓のようにやるといけると教えてくれた。あとで試してみる。 http://d.hatena.ne.jp/takeda25/20110131 その最中にこんなの見つけた。 Pythonの自然言語処理用パッケージNLTKをインストール http://d.hatena.

ブックマークしたユーザー

t_ashula2011/02/04
sleepy_yoshi2011/02/02
schrift2011/02/02
zerihik02011/02/02
aquarla2011/02/01
isdyy2011/02/01
mangakoji2011/02/01
mwsoft2011/02/01
manabou2011/02/01
t104712011/02/01
yuiseki2011/02/01

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

設定を変更しましたx