livedoor Developers Blog:String::Trigram でテキストの類似度を測る - livedoor Blog（ブログ）
こんにちは。検索グループ解析チームの nabokov7 です。 今回は、livedoor キーワードでの事例より、テキストの類似度を測るのに便利な手法を紹介します。 livedoor キーワードは、livedoor ブログでその日その日で話題になった語をランキング表示するサービスです。 当初、はてなキーワードやWikipediaを足して2で割ったようなサービスを作れといった開き直った指示のもとで開発が開始されたともいう、分社化前の芸風の名残で、キーワードの検索結果にはユーザが自由に解説を書き込める Wikipedia 的スペースもついています。 で、この解説部分に、さまざまなサイトから文章をまる写ししちゃう人がとても多いのですね。 特に多いウィキペディア日本語版からの剽窃を防止するために、livedoor キーワードでは以下のような対策を講じることにしました。 ウィキペディア日本語版の解説
gakkai.dvi
文の時間表現の分類と時間表現抽出システム Classification and Extraction System of Temporal Representation 榎村 麻里 † 田村 直良 †† † 横浜国立大学教育人間科学部 †† 横浜国立大学大学院環境情報研究院 {emura, tam}@tamlab.ynu.ac.jp 1 はじめに 本論文では、日本語文章における時間表現の出現 パターンを分類し、これを抽出するためのモデル化 および、文章中から時間表現を自動抽出するシステ ムについて述べる。 インターネット上の新聞記事や日記等、様々な出 来事について記述された電子文書が膨大な量で入手 できる現在、これらを自動的に解析する必要性が高 まっている。出来事の発生時間や順序を自動的に解 析することができれば、膨大な文書の中から特定の 時間や時期に発生した出来事を検索したり、複
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
人工知能学会 (The Japanese Society for Artificial Intelligence) – 人工知能学会のホームページです。入会手続き、会議やセミナーの開催予定、学会誌情報などを掲載しています。
人工知能学会 (The Japanese Society for Artificial Intelligence) – 人工知能学会のホームページです。入会手続き、会議やセミナーの開催予定、学会誌情報などを掲載しています。