Lingua::JA::TFIDFとSearch::Estraierで類似エントリ検索
Hyper Estraier インストール（３） オリジナル検索エンジンの作成によるとややこしいことしなくてもクローラーとP2Pって連携できる。ちゃんと読んだらクローラガイドにも書いてあった。 というわけでP2Pの設定をしてテストしてみた use Lingua::JA::TFIDF; use Search::Estraier; my $text = q( * 長い労働時間がより多くの成果を生み出す訳ではない。むしろ仕事と生活をうまくブレンドしたほうが生産性が上がる * 仕事人間は過度に会社に期待している、会社も期待しているだろうという思い込む * 生きること(living)と存在していること(existing)は違う * 働きかたを選べるようになるためには、まず自分のスキルを磨く * 少子高齢化で人口減少の社会では終身雇用は機能しない * 効率の良い働きかたの延長線上に豊かな発想は生み出さ
HyperEstraier: @uri属性の重複による文書削除 « （有）サウンドボード公式ブログ メンバーによるIT関連何でも技術情報メモ
@uri属性はデータベース内で一意である必要がある． もし，同一の@uri属性を持つ文書doc1, doc2をdoc1, doc2の順に登録すると，doc1は削除される． しかしながら，doc1に含まれるキーワードで検索した場合にはest_db_search() の結果で得られる文書ID配列には doc1 のIDが含まれる． estcmd optimize を使ってデータベースの最適化を行うと，同じキーワードで検索してもdoc1はHITしなくなる． estcmd optimize を実行しないまま，est_db_get_doc() でdoc1文書の取得を試みると，NULLが返る．NULLが返るときの対処はプログラマの責任である．このことは，Programming Guideにも以下のように，きちんと記述されている． 検索結果が得られたら、あとはそれに含まれる個々の文書を取り出してから表示し
HyperHyper EstraierEstraierのの 設計と実装設計と実装 株式会社ミクシィ 平林 幹雄 mikio@users.sourceforge.net 2006年11月6日 「オープンソースの全文検索、DBMSシステム」 講演資料 アジェンダアジェンダ
HyperHyper EstraierEstraierのの 設計と実装設計と実装 株式会社ミクシィ 平林 幹雄 mikio@users.sourceforge.net 2006年11月6日 「オープンソースの全文検索、DBMSシステム」 講演資料 アジェンダアジェンダ • Hyper Estraierの概要 • N.M-gramインデックス • スケールアウト戦略 HyperHyper EstraierEstraierの概要の概要 HyperHyper EstraierEstraierとはとは • 読み方 – ハイパーエストレイ(ア|ヤ)(ー)? – estraier： [古仏] 迷う、はぐれる = stray • 全文検索システム – 大量の文書を対象に「フリーワード検索」ができる – 予め転置インデックスを用意することで高速に処理 • 文書規模Nに対する時間計算量 – 全体のインデク
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
product:chimera - Open Source Solution Technology Corporation
qdbm 開発メモ ファイルシステム対決
