たぶん1分くらいでできる形態素解析とtfidf(テストコードつき) - Qiita

下のコードを貼りつけて実行してみてください TF-IDFを出力するための関数がtfidf 形態素解析するための関数がextract_words 下の方にあるimport unittest以下の長ったらしいヤツはテスト #!/usr/bin/env python #-*- encoding: utf-8 -*- import nltk import MeCab import urllib2 from urllib2 import HTTPError from itertools import chain def tfidf(doc,docs): """対象の文書と全文の形態素解析した単語リストを指定すると対象の文書のTF-IDFを返す""" tokens = list(chain.from_iterable(docs)) #flatten A = nltk.TextCollection(do

[ismage]

via Pythonタグが付けられた新着投稿 - Qiita http://qiita.com