カイ二乗値で単語間の関連の強さを調べる

カイ二乗値で単語間の関連の強さを調べる 2007-09-19-1 [Algorithm][Programming] カイ２乗値を使って単語間の関連度を調べる方法。 つまり、関連語を探すときに、χ二乗値を関連度として使う。 perl によるサンプルコード (chiword.pl)。昔、勉強がてら作ったコード。 #!/usr/bin/perl use strict; use warnings; my %cnt; my $pair_num; while (<>) { chomp; next if /^\s*$/; my @list = sort split(/,/, $_); for (my $i = 0; $i < @list; $i++) { for (my $j = $i + 1; $j < @list; $j++) { next if $list[$i] eq $list[$j]; $c

[webmarksjp]

カイ二乗

[ono_matope]

『関連語を探すときに、χ二乗値を関連度として使う。』

[nilab]

_ [を] χ二乗値で単語間の関連の強さを調べる : カイ２乗値を使って単語間の関連度を調べる方法。つまり、関連語を探すときに、χ二乗値を関連度として使う。

[stealthinu]

ベイジアンフィルタだけじゃ単語間やルール間の関連性まで考慮できないから、こういうの使って関連付け情報まで学習できないかな？

[hiromark]

なつかしい、というか、いかん、忘れとる。

[kanouk]

カイ二乗なんたらって自然言語処理にも使えるんだね。