はじめに こんにちは、AI修行中のoreyutaroverです。 最近Kerasを使い始め、CNN単体やRNN単体のモデルはお手軽に構築させて頂いています。 次にどんなAIを勉強しようかなーとネットを眺めていたところ、CNNとRNNを組み合わせた面白い題材がありました。 それが、”画像キャプション生成”です! 画像キャプション生成とは、画像を入力として与えると、出力として画像の内容を説明する短い文章を生成することです。 CNNとRNNの両方を使用した複雑なモデルを構築することは非常に良い勉強になりますし、これを手作りするとどんな結果が得られるかも気になるところなので、取り敢えずチャレンジすることに決めました。 画像キャプション生成のサンプルコードを調べてみると、ほぼ全てが英語キャプションでした。 これをそのまま真似するだけではつまらないので、今回は画像の”日本語キャプション”を自動生成する