「Google検索に欠けている情報を」 Web上の評判や対立意見を抽出、NICT「WISDOM」
情報通信研究機構（NICT）は8月9日、キーワードやフレーズを入力すると、Web上での評価や、評価を発信している発信者の情報を抽出・分析できるシステム「WISDOM」（Web Information Sensibly and Discreetly Ordered and Marshaled）を公開した。NICTが独自に収集した5億件以上の日本語ページを対象に分析する。 入力したキーワードについて、Web上にある肯定・否定意見の割合や内容を表示したり、「企業」「政府」「Q＆Aサイト」など発信者ごとに絞って検索結果を確認できる。単語だけでなく、「うがいの効果」「バイオエタノールは環境に良い」などフレーズや短文でも調べられる。 （1）発信者を自動抽出し、専門性の高い順に順位づけする「情報発信者分析技術」、（2）意見や評価を抽出し、肯定・否定を判断する「評価情報抽出技術」、（3）関連するワードや対
Introduction to Information Retrieval #18 の復習資料 - naoyaのはてなダイアリー
Introduction to Information Retrieval 輪読会 18章の復習資料を以下にアップロードしました。 http://bloghackers.net/~naoya/iir/ppt/iir_18.ppt 18章のテーマは "Matrix decompositions and latent semantic indexing" で、行列の特異値分解と Latent semantic indexing (LSI, 潜在的意味インデキシング) でした。ベクトル空間モデルの核である単語文書行列を特異値分解を用いて低階数近似し、計算量を下げながらも*1適合度を向上させるという LSI についての解説の章です。LSI に関しては http://d.hatena.ne.jp/naoya/20090212/latent_semantic_indexing にて先日少し言及しました
Introduction to Information Retrieval
This is the companion website for the following book. Christopher D. Manning, Prabhakar Raghavan and Hinrich Schütze, Introduction to Information Retrieval, Cambridge University Press. 2008. You can order this book at CUP, at your local bookstore or on the internet. The best search term to use is the ISBN: 0521865719. The book aims to provide a modern approach to information retrieval from a co
Linguist's Search Engine
The Linguist's Search Engine There is now a Google Group for LSE users. When you register to use the Linguist's Search Engine, please go there and join! Getting Started Guide Log in to the Linguist's Search Engine You can use login: guest password: guest if you do not wish to register. Register to use the Linguist's Search Engine You should register for an account if you want to build your own
［PostgreSQLウォッチ］第32回 PostgreSQL 8.2の全文検索機能
8.2の正式リリース時期は？ 現在β3までリリースされているPostgreSQL 8.2の正式版のリリース時期だが，この記事を執筆している時点では12月5日とされている。少し早めのクリスマスプレゼントという感じのリリースになりそうだ。楽しみにしておこう。 GIN再び PostgreSQLウォッチ第30回ではPostgreSQL 8.2の追加機能について報告した。今回は，そのとき取り上げた汎用転置インデックスGINに関する追加調査結果を報告する。 GINを使うと今まで不可能だった，データベース中のテキストのインデックスを使った高速な全文検索が可能であることは既に報告したとおりだ。しかし，その後しばらく使ってみると，いくつか問題点が見つかった。 (1) 重複した単語が登録されるので無駄 (2) 大きなテキストでは，データ登録に時間がかかるだけでなく，メモリーを消費する (1)に関してはGINに
[を] 裏で形態素解析器を使い長い文をそのままキーとしてWeb検索する
裏で形態素解析器を使い長い文をそのままキーとしてWeb検索する 2006-09-17-1 [YahooHacks][NLP] 今回の YahooHacks は、 長い文を検索キーとしてWeb検索をするというハックです。 一年前の検索会議[2005-09-30-3]で紹介しましたが、 今回ゼロから書き直しました。 サンプルコードが長くなってしまってすいません…。 (一時的にデモを置いておきます。そのうち消えます。ご了承下さい。 http://nais.to/~yto/tmp/yahoohacks-samp/hack_sentence.cgi 検索例：SEOの10ステップと...←うろ覚えタイトル ) ■■■長い文をそのまま検索キーとして Web 検索する どこかからコピペしてきた長い文をそのまま Yahoo! で検索しても ヒットしないことが多いです。 そういう場合
plotless: UTF-8での全文検索メモ（PostgreSQL + Tsearch2 + MeCab 編）
慣れない perl に苦戦しているわけですが、"Bad free() ignored (PERL_CORE)" って警告が出てくる原因がイマイチわかりません…。 perl5.8を入れ直してみようかとportsでコンパイルするとエラーが出るようになるし…。困ったなぁ…。 で、それとは関係なくポスグレのTsearch2 + MeCabを使った全文検索の仕方を忘れないようにメモメモ。 参考にしたのは以下のページ。 https://www.oss.ecl.ntt.co.jp/tsearch2j/index.html http://www.emaki.minidns.net/Programming/postgres/index.html --- 環境 ・FreeBSD 5.4 ・PostgreSQL 7.4.13 インストール済み (/usr/ports/databases/postg
テキスト検索エンジンライブラリ - Apache Lucene 2.0 登場 | エンタープライズ | マイコミジャーナル
The Apache Lucene Project, the Apache Lucene (Java)は27日(米国時間)、Apache Luceneの最新版であるApache Lucene 2.0を公開した。Apache LuceneはJavaで作成された高性能高機能なテキスト検索エンジンライブラリ。同プロジェクトは、Apache Luceneはテキスト検索を必要とするアプリケーション、とくにクロスプラットフォームで動作する必要がある場合には適切なテキスト検索エンジンライブラリだとしている。 Apache Lucene 2.0はApache License Version 2.0のもとで公開されているオープンソースソフトウェア。1.9.1からのバグフィックスが主な変更点である。ただし、1.x系において非推奨となっていた機能については2.0からは削除されているため注意されたい。 Apach
評判を検索する: mediologic.com/weblog
Disclaimer このブログは高広伯彦の個人的なものです。ここで述べられていることは私の個人的な意見に基づくものであり、私の雇用者には一切の関係はありません。 Powered by Movable Type 3.17-ja « Ask.comのＣＥＯが。。。 | Main | リーセンシーの高いビールの広告。だったりして。 » April 22, 2006 評判を検索する ■ gooラボ 評判検索 最近話題のＣＧＭ／ブログ検索は数あれど、gooラボの「評判検索」は視覚化されてる部分がちょっと他と違って面白い。 ためしに、こことこことこことここの“評判”を調べてみた。 ちょっと面白い。特に前者二つの比較。結構コレは当たってたりしてｗ。 ただ、キーワードに対してその周辺の肯定語・否定語で判断するというロジックが基本となっているせいか、リザルトに上がってくるページの中には？？？というのもあ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Webに関する文献集
構文木による構文木付きコーパス検索システム (pdf)