芸能人の相関関係を探ってみるスクリプト - download_takeshi’s diary

ちょっとした実験をしてみました。芸能人の相関関係を機械的に探索してみます。 具体的には「○○というタレントと関係が深い芸能人は？」といった、芸能人にフォーカスした類似検索みたいな実験です。 技術的には「潜在的意味インデキシング」（Latent Semantic Indexing）といった手法を使います。 これは普通は自然言語処理の世界で使われるテクニックですが、なにも言語だけでなく他のデータ素材でも面白い結果が得られるかもしれないので、やってみようという試みです。 以下に大まかな手順をまとめます。 wikipedia から有名人のリストを抽出 それらの有名人リストについて、一人ずつ「誰と関連が深いか」を集計。具体的には有名人個々のwikipediaのページ中に、先ほど抽出しておいた人名リストとマッチする人名がどれだけ掲載されているかをピックアップしていきます。 上記の方法で有名人の間の相関

[download_takeshi]

セルクマ！

[mkomiya]

芸能人をクラスター分類

[rin1024]

凄い

[colonoe]

技術的には「潜在的意味インデキシング」（Latent Semantic Indexing）といった手法を使います

[michael-unltd]

wikipediaをベースに実験

[youhey]

おもしろい、wikipedia+偉人、政治家でも楽しめそう。Perlはパワフルでライトな言語だなと実感。

[hisasann]

わ〜お、こうゆうの面白そうね

[kenkitii]

おもしろい！

[nitoyon]

潜在的意味インデキシング（Latent Semantic Indexing) で関係を探る。Perl で抜き出して、ごにょごにょやるときのテクニックいろいろ。

[wacky]

Wikipediaのデータを使って潜在的意味インデキシングの実験。有名人の相関関係を機械的に探索して、関係の深い人を抽出できるように。Perlのサンプルコード。

[psychedesire]

面白いなぁ～。

[ka-wara]

wikipediaから抽出して