スマートフォンでGoogle翻訳などの翻訳機能を使えば、わからない外国語もすぐに調べることができますよね。例えば、英語能力テストのTOEICを受ける人にとっては、初めて目にする英単語もスマートフォンですぐに調べられる翻訳機能は大変便利です。 そんな便利な翻訳機能には、自然言語処理という技術が使用されています。自然言語処理とは、AI（人工知能）に人間の言葉を理解させるための技術です。 そして、自然言語処理技術の一つになるのが、トピックモデルのLDA。LDAは文書の検索などで使われている技術で、これを実現するためにはAI（人工知能）に機械学習で仕組みを学習させます。 つまりLDAは、機械学習に関連します。そのため機械学習の初心者は、ぜひ学んでおきましょう。というわけで今回は、トピックモデルのLDAについてお伝えします。 そもそもトピックモデルって何 トピックモデルとは、複数の文書を分析して少数

BERTとは BERTはBidirectional Encoder Representations from Transformersの略で、Transformerと呼ばれるディープラーニングのモデルが使われています。 TransformerはGoogleのAshish Vaswaniらが2017年に” Attention Is All You Need”という論文で発表されました。それまで、機械翻訳などの自然言語処理ではSeq2seqのようなRNN (Recurrent Neural Network)を用いたモデルが多く用いられてきました。そこでTransformerは再帰型のニューラルネットワークであるRNNを用いずに、Attentionと呼ばれるどこに注意を向けるか決める仕組みだけを使用して、Seq2seqよりも高い性能を達成しました。 BERTはこのTransformerを用いて作

今では機械に複数の言語を翻訳させたり、知りたい情報を検索サービスですぐに得られるようになりましたよね。実はこの背景には形態素解析という技術が大きく関係しています。 実はこの形態素解析は形態素解析エンジン「MeCab」で体験することができます。 それではこの形態素解析が体験できる形態素解析エンジン「MeCab」をPythonで利用する方法を説明していきましょう。 このMeCabとは形態素解析ができるソフトウェアのこと。単体で利用したり、プログラミング言語「Python」とMeCab連携して使うことが可能です。 そこでまずMeCabと形態素解析についての基本やどのような環境構築・準備が必要なのか。また、MeCabのインストール・Pythonと連携させる方法、PythonでMeCabを利用した形態素解析をする方法を具体的にお話します。 最後にはMeCabを使うときのポイントや、みなさんに併せてお

AI（人工知能）と聞いて、人間のように自然な会話ができるドラえもんやしゃべるロボットを想像する方も多いですよね。このようにコンピューターを使って人間の言葉を取り扱うことを自然言語処理(NLP Natural Language Processing)といいます。 自然言語処理については、昨今のAI（人工知能）ブームの中でも多くの研究がされていて、なんと人間よりも高精度な読解を行えるような研究成果も多数報告されています！そんな自然言語処理ですが、実は身の回りでも多くその技術が用いられています。自然言語処理がどのように活用されているかを知ることで、日常生活でそれらの技術が取り入れられているシステムをうまく活用できるようになったり、ビジネスでもどのように活用すれば良いかを考えるきっかけになるかもしれません。 そこで今回は、身近な自然言語処理の活用事例についてご紹介します。 自然言語処理（NLP）と

最近ではPythonでプログラミングをしたり、AI（人工知能）を使ったりする人が増えていますよね。 Pythonでプログラミングして作れる物の一つに、音声認識があります。以前は音声認識の精度があまり良くありませんでしたが、近年、音声認識の精度は驚くほど向上し、色々な言語の違いだけではなく、方言まで認識することができるようになったとのこと。さらに、さまざまなAPIの登場などにより、音声認識のプログラムを作成した経験がない人でも簡単に、Pythonで音声認識ができるようになりました。 とはいえ、何も知らない状態でいきなり音声認識を作るのはやはり難しいでしょう。そこで今回は、Pythonで音声認識を作る方法についてお伝えします。1つ1つ丁寧に解説していくので、Pythonの音声認識の作り方について、一緒にマスターしましょう！

今、画像認識技術のようにAI（人工知能）の技術が活躍していますよね。そのような中、自然言語処理（NLP）という技術も非常に注目が集まっています。 自然言語処理（NLP）という言葉はAI（人工知能）への興味関心が強い皆さんも一度はどこかで聞いたことがあるかもしれません。でも、実際のところ自然言語処理（NLP）って何だろう、聞いたことあるだけでどんなところ技術かよくわからない・・・という人も結構いるはず。実は自然言語処理（NLP）はAI（人工知能）の中でもかなり身近なところで使われて、これから自然言語処理（NLP）はさらに発展するともっと使われる場面が増える可能性があります。 そこで今回は、そんな自然言語処理（NLP）について初心者にもわかりやすく解説しましょう。まずは、自然言語処理（NLP）とは何か、自然言語処理（NLP）そのものについて解説します。 自然言語処理（NLP）とは？ 自然言語処