Steve Jobsが卒業スピーチで「大事な事だから2度以上言った単語」を自然言語処理で取り出す - Qiita

Node-REDは、機能毎に用意された処理ノードをマウスで繋ぐ操作で、簡単にアプリケーションを作成できる開発環境です。当初はIoT向けに開発されましたが、ウェブアプリケーション開発等、幅広い用途で利用されるようになりました。 今回は自然言語処理の簡単な例として「大事な事だから2度以上言われた単語」を取り出す処理を実装します。 実装する処理 自然言語処理をよく知っている方は、tf-idfの考え方と言うとイメージしやすいと思います。tf-idfは、検索エンジンが適切な文書が検索結果の上位に来るようソートする時に使うアルゴリズムで、検索キーワード中の特徴的な単語を用いてスコアリングする手法です。 本実装ではテキストを入力とし、「文書中の単語の使用回数」を「単語の珍しさ」で割った値をスコアとして用いて、テキストの中で良く使われる重要な単語を取り出します。正確には「大事な単語で、かつ何度も言われた単

[joe-re]

あとでちゃんと読もう