タグ

言語処理に関するyutaka_kinjyoのブックマーク (1)

  • 自然言語(日本語)処理

    トップページ→研究分野と周辺→ 英語、日語のように人間が自然発生的に使って来た言語を自然言語という。これに対し、プログラミング言語等の規則に基づく人工言語を形式言語と呼んで区別する。 日語をコンピュータで処理する場合、その最も基形態素解析がある。 形態素解析→構文解析→意味解析→文脈解析といった、解析の連鎖(解析精度は左から右に移るに連れて下がる)を経て、ようやく自然言語の意味をコンピュータが処理出来るようになる。勿論、国語辞典や文法の知識、一般常識等をデータベース化しておく必要がある(機械処理の日語文法)。 しかし、自然言語は生き物のように変化し、常に新しい言葉、新しい用法も生まれ、一つの言葉が多数の意味を持ったり、その意味が変化したりしている。 人間も実は、言語情報を完全に処理している訳ではなく、多数の解釈の中から最も「妥当な」解釈を判断していると言われる。その「妥当性」をコ

  • 1