delegateのブックマーク - はてなブックマーク

PyMC3の概要とインストール｜PyMC3チュートリアルに学ぶ統計モデリング #1 - Liberal Art’s diary
当シリーズではPyMC3のチュートリアルを元に統計モデリングについて確認していきます。PyMC3はベイズ統計モデリングのためのPythonのパッケージで、Pythonにおいてベイズ統計を取り扱うにあたってはデファクトとみて良いパッケージだと思います。 #1では導入としてPyMC3の概要の確認とインストールに加え、簡単な動作確認を行います。以下、目次になります。 1. PyMC3の概要 2. PyMC3のインストール 3. 動作確認 4. まとめ 1. PyMC3の概要まず1節ではPyMC3の概要について、主にWikipediaを元に確認します(https://en.wikipedia.org/wiki/PyMC3)。冒頭の記載を簡単に確認してみます。上記によると、PyMC3は「高度なMCMCや変分近似アルゴリズムに特化した、ベイズ統計モデリング(Bayesian statistica
delegate 2022/07/19
pymc3
リンク
BoWと形態素解析｜実践的自然言語処理入門 #1 - Liberal Art’s diary
時折自然言語処理のセミナーを行うのですが、毎回同じことを話すのもなかなか退屈なので、基礎知識を公開情報の形式で簡単にまとめていければと思います。 #1では教師あり学習について簡単に復習した上で、言語処理の基本となるBoWと形態素解析について解説していきます。以下目次になります。 1. 機械学習（教師あり学習）の復習 2. 自然言語の取り扱いとBoW(Bag of Words) 3. 形態素解析とJanome 4. まとめ 1. 自然言語処理に機械学習をどのように適用するか（概論）自然言語処理について学ぶ前にまず機械学習について軽く復習します。上記の記事でご説明したように機械学習において実務で用いやすい教師あり学習のアルゴリズムはXとyの組みから規則を作って新しいXに対して予測を行うアルゴリズムです。上記の記事では距離の概念を利用して規則を作っていますが、規則の作り方は色々とありこれ
delegate 2020/01/29
自然言語処理

特徴語
リンク
特徴語抽出とtf-idf｜実践的自然言語処理入門 #2 - Liberal Art’s diary
#1では自然言語に教師あり学習を適用するにあたって、BoWと形態素解析の導入を行いました。 #2ではPoC開発などで用いやすい特徴語抽出とその有名なアルゴリズムであるtf-idfについてまとめられればと思います。以下目次になります。 1. PoC開発における特徴語抽出 2. tf-idfの仕組み（理論） 3. tf-idfの実装 4. まとめ 1. PoC開発における特徴語抽出データ分析や機械学習などのプロジェクトを進めるにあたってはやってみないとわからないことも多いので、まず最初にPoC(Proof of Concept)の開発を行うことが多いです。これを行うことで、アウトプットの擦り合わせをしながらプロジェクトをどんどん進めていくことが可能です。物がない時点だと議論が空中戦になることも多いし、精度面での期待値の擦り合わせも難しいので擦り合わせは非常に重要です。さて、自然言語処理に
delegate 2020/01/29
自然言語処理

特徴語
リンク
1