TensorFlowコトハジメ Word2Vecで「君の名は。」と戯れてみた - デジタル・デザイン・ラボラトリーな日々
はじめに 前回、Word2Vecを初めて試してみて面白いと思ったので、日本語に挑戦することにした。 yaju3d.hatenablog.jp 日本語に挑戦するにあたり、どうせなら旬なネタがいいなと思って、今のお気に入りは火曜ドラマ「逃げるは恥だが役に立つ」で「みくに － 平匡」の結果がどうなるか見てみたいと思ったわけですが、元となるデータ(2chデータやTVの感想)を収集するのが面倒くさいのと、まだドラマが中盤なので後回しにしました。 その代わりとして思いついたのが新海誠さんの「君の名は。」です。小説が出ているので小説をそのまま取り込めば、ノイズが入らないのでいい結果が得られると思ったからです。ただデータ量としては少ないのが懸念です。 小説のテキスト化 小説 君の名は。 (角川文庫) Kindle版を購入しました。 下記の手順に従って、「君の名は。」をテキスト化しました。個人でデータマイニ
TETDM - PukiWiki
Total Environment for Text Data Mining † テキストデータマイニングのための統合環境 ↑ 背景 † 世の中で蓄積されるデータに対する分析のニーズが高まっている一方で，データを分析できる人材が足りず，その育成が急務となっています． 世の中の多くの人が，AIリテラシー，データサイエンスのスキルを身につけることが求められる時代になっており，小中高大学で必修化の動きが進められています． データを分析できる人材とは，単にデータ分析のツールを使える人，分析手法の知識を持つ人ではなく，データ分析の一連の手順を理解し，分析の結果に意味を与え，与えられた意味を整理，統合して知識としてまとめられる人になります． ↑ TETDMとは † TETDMは，テキストデータから様々な情報を抽出して提供し，データの考察を促して意思決定の助けとする，データ分析支援ツールです． テキスト
はてな社内の勉強会で構造学習について発表しました - yasuhisa's blog
先週末、はてな社内の勉強会で構造学習、特に実装が簡単な構造化パーセプトロンについて発表しました。発表資料と説明用にサンプルで書いたPerlの品詞タグ付けのコードへのリンクを張っておきます。 今日からできる構造学習(主に構造化パーセプトロンについて) from syou6162 structured_perceptron/structured_perceptron.pl at master · syou6162/structured_perceptron 「えっ、Perlかよ」という人がいるといけないので、Clojureで構造化パーセプトロンを使った係り受け解析のサンプルコードへのリンクも張っておきます(2種類あります)。PerlもClojureもあれば8割くらいの人はカバーできそうなので、安心ですね。 syou6162/simple_shift_reduce_parsing syou616
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
MeCab ソースコードリーディング私的メモ（形態素解析編） - あらびき日記
