Goyaという形態素解析器を Rust で作りました。本記事は利用者目線で Goya の紹介をします。技術的な詳細については別途記事を書きます。 形態素解析とは? (このセクションは形態素解析の基礎の話なので知ってる方は読み飛ばしてください) 形態素解析(けいたいそかいせき、Morphological Analysis)とは、文法的な情報の注記の無い自然言語のテキストデータ(文)から、対象言語の文法や、辞書と呼ばれる単語の品詞等の情報にもとづき、形態素(Morpheme, おおまかにいえば、言語で意味を持つ最小単位)の列に分割し、それぞれの形態素の品詞等を判別する作業である。 — 形態素解析 - Wikipedia 例えば早口言葉の”すもももももももものうち”(スモモも桃も桃のうち)という言葉を形態素解析すると以下のような結果が得られます。スモモや桃が名詞、間にある”も・の”は助詞と解析さ
![WebAssemblyの形態素解析器GoyaをRustで作った](https://cdn-ak-scissors.b.st-hatena.com/image/square/56b193b774700af5a034d5be4b497dd86f820e9c/height=288;version=1;width=512/https%3A%2F%2Fblog.leko.jp%2Fstatic%2F2f5360409c74a20d0fb513eb75283c58%2F3a46b%2F2021-10-23-13-31-45.png)