検索エンジンを作る 第6回 N-gramと形態素解析との比較 2007年8月13日 工藤智行 検索エンジン, N-gram, 形態素解析 1 2 これまでに，N-gramと形態素解析の2つの検索エンジンの，見出し語の切り出し方法を説明しました。今回は，2つの見出し語の切り出し方法を比... 続きを読む

• gihyo.jp
• コンピュータ・IT

こんにちは、山下です。 今年もどうぞよろしくお願い致します。 Webサービスを開発していると、特定のキーワードを自動でURLリンクにする処理が必要になることがあると思います。今回は、このキーワード自動リンク機能を形態素解析ツールMecabを使ってPHPで実装... 続きを読む

• labs.unoh.net
• コンピュータ・IT

僕は昔からロボットがロボットなりに変な文章を生成して喋ったりする人工無脳とかそういう仕組みが好きで、最近はそのへんの仕組みを勉強していました。それで大体仕組みの基本はわかったので簡単なスクリプトを書いてみたよ。 圧縮新聞このスクリプトはウェブ... 続きを読む

• d:id:pha
• コンピュータ・IT

2007/08/15 検索サービスを提供するベンチャー企業のムーターは8月1日、辞書を必要としない形態素解析エンジン「マリモ」の提供を開始した。従来、形態素解析では品詞情報を含む日本語辞書を用意するのが常識だったが、マリモでは、そうした辞書を不要とした。... 続きを読む

• www.atmarkit.co.jp
• コンピュータ・IT

Javascript で diff というのはいくつか試された例はあるようですが、まだこれといった決定打は出ていない様子です。 実は diff は見た目ほど軽い処理ではないので、Javascript にやらせるのはこれが結構大変…… diff の計算量は、おおざっぱに言うと比較対象... 続きを読む

• labs.cybozu.co.jp
• コンピュータ・IT

MeCabで形態素解析器を作りたい場合は以下の二つの言語リソースが必要です。 1. 辞書 (単語と品詞のペアの集合) 2. 入力文と、それに対応する正解出力ペア(正解データ) 現在公開している mecab-ipadic は、ipadicとRWCPコーパスという正解データを使っています... 続きを読む

• chasen.org:taku
• コンピュータ・IT

形態素解析と検索APIとTF-IDFでキーワード抽出 2005-10-12-1 [Programming][Algorithm] 形態素解析器と Yahoo! Web 検索 API と TF-IDF を使ってキーワード抽 出するという先日の検索会議でのデモ、KEYAPI[2005-09-30-3]。 教科書に載っているような基本中の基... 続きを読む

• chalow.net
• コンピュータ・IT

エラー <error> <message>GET/POST param q is invalid.</message> </error> 米Y!の同じ機能を持ったAPIを参考にしています。 Term Extraction Documentation for Yahoo! Search Web Services サンプルレスポンス http://zuzara.dyndns.org/api/koshian?q=Micro... 続きを読む

• blog.zuzara.com
• コンピュータ・IT