Pythonで日本語WordNetと英語WordNetを利用して、単語間の類似度を測る - Tech Blog
目的 「Mr.Childrenの歌詞分析(4): 単語の意味を考慮した、シングル曲のクラスタリング」では、文書の距離を計測するのに、同一語や同一概念の出現頻度を用いていた。この場合、"似ている"単語は考慮されておらず、クラスタリングの精度もいまひとつであった。 この問題を解決するために、単語間の距離をWordNetを用いて計測したい。今回は、2つのテキストファイルを元に、それぞれの単語の類似度を出力するプログラムを作成した。日本語WordNetと英語WordNetを用いて、多義語に対応した単語間の距離を計測している。 ちなみに、わざわざ英語版WordNetを用いているのは、類似度を測るAPIが日本語WordNet(のPython API)には用意されていないから。また、「Python による日本語自然言語処理 12.1.5 日本語WordNet」 には日本語 WordNet に対するリーダ
第2回 さくさくテキストマイニング勉強会に行ってきた - matsuou1の日記
前回に引き続き、「第２回 さくさくテキストマイニング勉強会」に参加してきました。 会場は前回と同じOracle青山センターです。２００人ぐらい入る大きな会議室。さすがです。 目的＆概要 目的 テキストマイニングについての学習のスタートアップ テキストマイニング技術に関して気軽に参加・議論することができる場の提供 概要 テキストマイニングとは、例えば製品の評判をweb上のテキストから抽出したり、 大量のアンケートテキストを分析するために用いられる技術であり、特にマーケティングの場で多くの利用例があります。 この勉強会ではそうしたテキストマイニングを題材とし、用いられている要素技術とそれに関わる課題の議論、 またテキストマイニングを実務に活かす方法について考えていきます。 第2回「にこにこ」改め さくさくテキストマイニング勉強会 言語処理学会へ遊びに行ったよ〜不自然言語処理へのお誘い〜 [tw
PerlでWordNetを扱う - デー
WordNet::QueryDataでWordNetの辞書を直接扱える。(Manual) ちなみにWordNetとは、英語の意味辞書である。（くわしくはWordNet - Wikipedia） use WordNet::QueryData; my $wn = WordNet::QueryData->new("./wordnet"); # WordNetのdictディレクトリ my $word = "negative"; foreach ($wn->queryWord($word)) { foreach ($wn->queryWord($_)) { print $_, ": ", join("\n ", $wn->querySense($_, "glos")),"\n"; foreach ($wn->queryWord($_, "ants")) { # 反義語 print " antonym
連想検索エンジン reflexa
連想検索エンジンreflexa（リフレクサ）はコトバとコトバのつながりを元に未知の情報を探索していくための連想検索エンジンです。連想検索ならではの楽しい検索体験をお楽しみ下さい。
JAWJAW - 日本語 WordNet 用 Java API
JAWJAW (JAva Wrapper for JApanese Wordnet) は日本語 WordNet データベースの Java API で、単語の上位語、下位語、定義、訳などの言語知識が簡単に取得できます。 日本語 WordNet のウェブサイトで配布されているデータベースに対し、プログラムがデータベースを意識しなくてもデータにアクセスできるようなAPIです。一般的な Java プログラマー用のシンプルな API と、自然言語処理アプリケーション開発者用の API の両方を提供しています。 ファサードクラスを呼び出すだけでOK。メソッド一覧はこちらをご覧ください。 サンプルコード： public class SimpleDemo { private static void run( String word, POS pos ) { // ファサードから日本語 WordNet にア
WordNet::Multiをインストール メモ - 開発めも２
http://nlpwww.nict.go.jp/wn-ja/data/WordNet-Multi-0.1.tar.gz からWordNet-Multi-0.1.tar.gzをダウンロード ↓ 解凍 # tar xvzf WordNet-Multi-0.1.tar.gz ↓ 移動 # cd WordNet-Multi-0.1 ↓ # perl Makefile.PL PREFIX=Writing Makefile for WordNet::Multi ng Makefile for WordNet::Multi Checking if your kit is complete... Looks good Writing Makefile for WordNet::Multi ↓ # make 無問題 # make test PERL_DL_NONLAZY=1 /usr/bin/perl "
天天中彩票异常
但是在第四个项目，双杠上，日本队再度经历“噩梦”，赛前就备受右手伤病困扰的田中佑典出现了掉杠等失误，仅得到分，日本队从此退出了金牌的竞争。 比！中国年龄段国青队再一次以这样的比分输给了沙特队。这个结果也意味着中国国青队已经提前无缘小组出线，应验了外界的戏谑，即对参加大赛的中国队来说，每一次都是“揭幕战、生死战、荣誉战”，然后大谈“看到了希望”。这样的循环往复，已经不知道多少年、多少次了。而对记者而言，甚至都已经感到了绝望。 巴黎与那不勒斯的欧冠比赛，这也是内马尔职业生涯第场欧冠比赛。《马卡报》对比了内马尔、梅西、罗的前场欧冠比赛数据。 金庸曾对朋友说自己“古人最佩服范蠡，今人最佩服吴清源。”他赞吴清源：“棋如《笑傲江湖》中的独孤九剑，没有定式，变化无穷。他就像风清扬，清灵飘逸，仙风道骨。” “我们期望通过优质供应链服务向全球的输出，由‘向’转变，在全球构建‘双小时’通路，实现中国小时通达全
WordNet - Wikipedia
この記事には参考文献や外部リンクの一覧が含まれていますが、脚注によって参照されておらず、情報源が不明瞭です。脚注を導入して、記事の信頼性向上にご協力ください。（2022年12月） WordNet（ワードネット）は、英語の概念辞書（意味辞書）である。WordNet では英単語が synset と呼ばれる同義語のグループに分類され、簡単な定義や、他の同義語のグループとの関係が記述されている。 WordNet の目的は直感的に使うことのできる辞書とシソーラスが組み合わされた成果物を作ること、および自動的文書解析や人工知能のアプリケーションの実現を支援することにある。WordNet のデータベースやソフトウェアはBSDライセンスによって公開され、自由にダウンロードして用いることができる。データベースはオンラインで参照することもできる。 WordNet はプリンストン大学の認知科学研究所によって心理
日本語 WordNet (wn-ja)
日本語 WordNet リリース・ダウンロード * 画像 * 参考文献 * 関連プロジェクト * English 独立行政法人情報通信研究機構（NICT）では、大規模かつどなたでもご入手いただける日本語の意味辞書を開発することを目的とし、 2006年から日本語ワードネットの開発を進めて参りました。この度、2009年2月に 日本語ワードネットversion0.9 を公開する運びとなりました。 日本語ワードネットは、プリンストン大学で開発された Princeton WordNet やPrinceton WordNetとヨーロッパのEuroWordNetの協会が推進するGlobal WordNet Gridに着想を得て開発されました。 現在、広く利用されているPrinceton WordNetは、語を類義関係のセット (synset)でグループ化している点に特徴があり、一つのsynsetが一
Python による日本語自然言語処理
はじめに この文書は、 Steven Bird, Ewan Klein, Edward Loper 著 萩原 正人、中山 敬広、水野 貴明 訳 『入門 自然言語処理』 O'Reilly Japan, 2010. の第12章「Python による日本語自然言語処理」を、原書 Natural Language Processing with Python と同じ Creative Commons Attribution Noncommercial No Derivative Works 3.0 US License の下で公開するものです。 原書では主に英語を対象とした自然言語処理を取り扱っています。内容や考え方の多くは言語に依存しないものではありますが、単語の分かち書きをしない点や統語構造等の違いから、日本語を対象とする場合、いくつか気をつけなければいけない点があります。日本語を扱う場合にも
WordNet を perlにてサクラインターネットで使う (1) perlとシェルスクリプト
類義語辞書を扱えるWORDNETですが、perlに関する情報がとんでもなく少ないので、記事にしてみます。 たぶん個人のサーバーにインストールならなんとかなると思うので、 さくらインターネットでどうやって使うのかを検証してみます。 で、とりあえずインストールです。 http://nlpwww.nict.go.jp/wn-ja/ から WordNet-Multi-0.1.tar.gz をダウンロードして、解凍して、移動します。 まずはmakefileを作ります。 $ perl Makefile.PL PREFIX= Writing Makefile for WordNet::Multi コンパイル♪ $ make Manifying blib/man3/WordNet::Multi.3 テストします。 $ make test PERL_DL_NONLAZY=1 /usr/local/bin/p
perl WordNet::Multi 使い方 メモ - 開発めも２
マニュアル引用 use WordNet::Multi; &WordNet::Multi::wnDbOpen("wnjpn-0.9.db"); @synsets = &WordNet::Multi::wnAllSynsets; @words_en = &WordNet::Multi::wnWord("02084071-n", "eng"); @words_ja = &WordNet::Multi::wnWord("02084071-n", "jpn"); @synsets = &WordNet::Multi::wnSynPos("dog", "v", "eng"); @hypes = &WordNet::Multi::wnRel("02084071-n", "hype"); 「wnjpn-0.9.db」はインストールしたディレクトリ「WordNet-Multi-0.1」の「t」の中にある。
日本語 WordNet (wn-ja)
日本語 WordNet リリース * 画像 * ダウンロード * 今後の予定 * 参考文献 * リンク * English 本プロジェクトでは、 Princeton WordNet や Global WordNet Gridに 着想をえて、日本語のワードネットを構築し、オープンで公開します。 独立行政法人情報通信研究機構（NICT）では、自然言語処理研究をサポー ト する一環として、2006年に日本語ワードネットの開発を開始しました。最初の 版、version 0.9は、2009年2月にリリースされました。このversion 0.9は、 Princeton WordNetのsynsetに対応して日本語をつけています。もちろん、 Princeton WordNetにはない日本語synsetを付与する必要があり、また、 Princeton WordNetにみられるsynsetの階層構造に、
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ruigomush/prepare_scripts/p2.py at master · shisashi/ruigomush
はやく夏休みになれ:WordNet
統計翻訳手法を用いた類義語の自動抽出 揚石 亮平† 三浦 孝夫† † 法政大学大学院 工学研究科 電気工学専攻
Sign in - Google Accounts
Perl | ぱわふる - Page 2
Perl勉強メモ #003 グラフ描く | ぱわふる