poad1010のブックマーク - はてなブックマーク

NLP4J [004] Javaで自然言語処理と構文解析の統計処理を使ってテキスト分析をしてみる - Qiita
Indexに戻る : [003]品詞の統計処理 > [004]構文解析の統計処理 > [005-1] NLP4J+Twitter4J(データ収集) NLP4Jを使って形態素解析の結果と簡単な統計処理を利用してテキスト分析をしてみます。繰り返しになりますが、「形態素解析」や「構文解析」は料理で言うと「包丁の使い方」に近い感じです。「形態素解析」や「構文解析」に加えて「統計処理」を入れるとテキスト分析＝料理に近くなるのではないかなと思います。ここでの統計処理は簡単なものを利用しますが、機械学習や複雑な統計処理を入れてみるのもよいと思います。さて、ここで以下のような文書があったとします。１行が１レコードです。 "Toyota", "ハイブリッドカーを作っています。" "Toyota", "ハイブリッドカーを売っています。" "Toyota", "自動車を作っています。" "Toyota
poad1010 2019/10/27
Java

techfeed

あとで読む
リンク
NLP4J [003] Javaで自然言語処理と品詞の統計処理を使ってテキスト分析をしてみる - Qiita
Indexに戻る : [002]構文解析 > [003]品詞の統計処理 > [004]構文解析の統計処理 NLP4Jを使って形態素解析の結果と簡単な統計処理を利用してテキスト分析をしてみます。「形態素解析」や「構文解析」は料理で言うと「包丁の使い方」に近い感じです。「形態素解析」や「構文解析」に加えて「統計処理」を入れるとテキスト分析＝料理に近くなるのではないかなと思います。ここでの統計処理は簡単なものを利用しますが、機械学習や複雑な統計処理を入れてみるのもよいと思います。さて、ここで以下のような文書があったとします。１行が１レコードです。 "Toyota", "ハイブリッドカーを作っています。" "Toyota", "ハイブリッドカーを売っています。" "Toyota", "自動車を作っています。" "Toyota", "自動車を売っています。" "Nissan", "EVを作っ
poad1010 2019/10/27
Java

techfeed

あとで読む
リンク
NLP4J - Java で形態素解析（Yahoo! デベロッパーネットワーク日本語形態素解析を利用） - Qiita
package example; import java.util.ArrayList; import nlp4j.Keyword; import nlp4j.yhoo_jp.YJpMaService; public class HelloYahoo NLP1 { public static void main(String[] args) throws Exception { // 自然文のテキスト String text = "今日はいい天気です。"; Document doc = new DefaultDocument(); // 属性「text」としてセットする doc.putAttribute("text", text); // Yahoo! JP アノテーター YJpMaAnnotator annotator = new YJpMaAnnotator(); // 処理対象の属性を
poad1010 2019/10/26
Java

techfeed

あとで読む
リンク
1