検索技術と自然言語処理技術を駆使して話題のトピックをひとまとめ ～はてなブックマークのトピックページの作り方

はじめに 本稿では、はてなブックマークの10周年記念の第1弾として開発した「トピックページ」の作り方について解説します。トピックページとは、インターネット上で話題となったトピックを閲覧できるページです。 トピックページは、トピックに関連する記事の集合とトピックを表すタイトルから構成されます。 トピックページ生成の流れは以下の通りです。 トピック生成 トピック表すキーワード集合を獲得し、そのキーワードに関連する記事を収集する。 トピックタイトル生成 トピックに関連する記事の情報を利用してトピックを表すタイトルを生成する。 本稿では、Elasticsearchなどの検索技術を活用したトピック生成方法、および、CaboChaなどの自然言語処理技術を活用したトピックタイトル生成方法について説明します。 対象読者 Elasticsearchを利用している／したい方 検索技術、自然言語処理技術に関心の

[sds-page]

さだまさしと田代まさしがマージされる問題は解決したのかな

[seikoudoku2000]

これの話。elasticsearchってほんと凄いんだな〜。 #yapcasia

[gennei]

#yapcasia

[happyholiday]

技術ってすげぇ

[dekokun]

Elasticsearch様

[onishi]

シュンスケー

[razokulover]

最新バージョン使わないといかんのかー

[kirakking]

トピックは結構精度高いのですごいなーと思っている。これ→「2005 GAME DEVELOPERS CONFERENCE KEYNOTE ADDRESS DELIVERED BY NINTENDO PRESIDENT SATORU IWATA」(http://b.hatena.ne.jp/topic/300613694708732935)みたいに英語だとどうしても長くなるのか。

[stanaka]

しかしElasticsearch便利

[skozawa]

はてなブックマークのトピックの裏側について詳細に書きました！！