Word2VecをPythonでやってみる | Foolean – 備忘録風雑記ブログ
2016-08-27自然言語処理Python, Word2Vec ちょっと前から、自然言語処理分野を騒がせている「Word2Vec」という手法があります。これは、文章(単語の羅列)から単語の前後関係やらを用いて、単語のベクトルを学習しようと言うものです(たぶん)。 このベクトルというのが面白いもので、ベクトル間の距離が小さ(内積が大き)ければ、その二つの言葉は近い存在(ex. 犬と猫 や JPGとPNG など)ということになります。さらに、ベクトルであるがゆえに、それらの足し算・引き算ができます。このことが意味するのは･･･。 突然ですが、あなたは以下の式の「？」には何が当てはまると思いますか？ 王様 – 男性 + 女性 = ? 初見では、いまいちパッとこないかもしれませんが、この式が一番有名な例となっております。で、この式は「女王」がいい感じに当てはまるはずです。おまけに、もう一つ例を挙
自然言語処理の最新手法"word2vec"で艦これ加賀さんから乳を引いてみる - あんちべ！
概要 この記事は自然言語処理という分野の最新手法word2vec を利用して誰でも遊べるようにするための手順を説明するものです。 word2vecを利用すると意味の計算が実現できます。 例えば"king"から"man"を引いて"woman"を足すと"queen"が出てきたり、 "東京"から"日本"を引いて"フランス"を足すと"パリ"が出てくるという面白い手法です。 自然言語処理とは人間が日常的に用いる自然言語をコンピュータに処理させ、 翻訳や要約、文字入力支援や質問応答システムを作るなどに活用されている分野です。 自然言語処理と言うと耳慣れない言葉かもしれませんが、 実は検索や推薦などで私たちが日常的に利用しているなじみ深い技術でもあります。 自然言語処理の適用範囲や要素技術は幅広いのですが、 その中でもword2vecの特色は、 冒頭でも挙げたように「意味の計算」が出来ることです。 これ
word2vec利用のおぼえ書き - 「ヨーロッパ風のオレかっこいい」って思ってる愛知県民の日記
理論的なことはほとんどわかってない． だけど，単語n-gramをembeddingsと呼ばれるベクトル表現にしてくれることだけはわかっている． そのうち，しっかり勉強しますから．．．そのうち．．． とりあえず，「toolとして使う．」を第一目標にしてみた． word2vecについて Google projectの公式ページ python interfaceのページ python interfaceの使い方 word2vec本体について Google projectの公式ページで入手可能． 大体はここに書いてある説明のとおりにやっていけば良いのだが，pre-trainedのモデルファイルの利用がちょっと気になる． pre-trainedの利用方法 kensuke-mi@pine12:~/opt/word2vec$ ./distance pre_treained/freebase-vector
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
