タグ

形態素解析に関するakuyaku1gouのブックマーク (1)

  • 自然言語処理 | TickTack World

    機械学習にとって重要な「自然言語処理」について説明します。 「自然言語」とは、人が日常に使っている日語や英語などの言語のことです。コンピュータで使用するC言語やJavaなどのプログラミング言語と区別するため、このような呼び方をしています。自然言語は、人間の長い歴史の中で自然に発達してきたため、プログラミング言語と比べると、曖昧性が非常に高く、「自然言語処理(Natural Language Processing)」という特別な処理を行う必要があります。それでは、この特別な処理とはどのような処理でしょうか。 コンピュータは、原理的に数値しか扱うことしかできません。アルファベットや漢字を扱う際には、数字のかたまりである「コード」を割り当てます。しかし「単語」となると、その数は膨れ上がるため巨大な辞書となります。さらに単語を組み合わせた「文章」となると、無限の組み合わせになるためコード(数値)

    自然言語処理 | TickTack World
  • 1