Elasticsearch 日本語で全文検索 その２

Elasticsearch では、すでに日本語で全文検索する為のトークナイザーやノーマライズなどの加工処理で使用するフィルターなどがビルトインまたは、サードパーティ製のプラグインとして多数存在します。 ここでは、日本語全文検索で使用しそうなトークナイザーやフィルターなどを説明します。 主要モジュールNGram Tokenizer N-グラムを提供するトークナイザーです。Elasticsearch にバンドルされています。Japanese (kuromoji) Analysis for Elasticsearch 日本語形態素解析を提供するプラグインです。各種 Analyzer、Tokenizer、TokenFilterが含まれます。cjk_width Token Filter 半角・全角などを統一するためのフィルターです。Elasticsearch にバンドルされています。Lowercas

[HHR]

kuromoji

[h5y1m141]

"Synonym Token Filter 同義語を展開する為のフィルターです。Elasticsearch にバンドルされています。" おーそうだったんだ。ここをもうちょっと深掘りしたほうが良い気がしてきた

[tasogare30]

> 日本語全文検索で使用しそうなトークナイザーやフィルターなど

[snomof]

日本語検索で使うTokenFilterとTokenizer