N-gram 漢字<=>かな変換 - アスペ日記
@gologo13さんの言語モデル配布ページのデータを利用して簡単な漢字->かな/かな->漢字変換ができないかなーと思って作ってみた。 言語モデルの作成には SRILMを使用。 配布中のデータを SRILM で扱うには多少加工しないといけないので、その変換スクリプトも作った。 GitHub リポジトリは https://github.com/hiroshi-manabe/ngram-converter 。 ［追記］最新のバージョンでは、4-gram のかな漢字変換用辞書をあらかじめリポジトリに入れてある。 marisa-trie モジュールさえ入れてあれば、 ./converter_sample.py --dicname-prefix=dics/bccwj4_rev_dic --order=4 --interactiveですぐにかな漢字変換が実行できる。 まず、@gologo13さんの言語
第7章 言語モデル
Julius は認識のための言語制約として，いくつかの種類の言語モデルをサポー トしている．統計モデルである単語 N-gram モデルに基づく認識，記述文法に基づく認識，および単語リストのみによる孤立単語認識を行うことができる． また，ライブラリとして他のアプリケーションに組み込まれるとき，アプリケー ション側から何らかの言語制約を提供するユーザ関数を与えることで，その言語制約を直接駆動して認識処理を行うことができる． 言語モデルは，言語モデルインスタンスごとに個別に指定できる．一つの言語モデルインスタンスには一つのモデルしか指定できない（ただし文法については一つのインスタンス内で複数の文法を使うことができる）．複数の言語モデルインスタンスに対してそれぞれ異なるタイプのモデルを指定することで，複数の異なるモデルを同時に用いて認識することもできる． 本章では，各言語モデルで共通である単語辞書
SRILMインストール - (wrist blog)
言語モデル構築に用いられるSRILM(1.5.11)をmacbook pro(Snow Leopard)と 研究室のサーバ(Red Hat Enterprise Linux ES release 4 (Nahant Update 7))にインストールしたのでそのメモ． 必要条件 gcc(3.4.3以降) インストール 以下のサイトから必要な情報を記入しソースをダウンロード http://www-speech.sri.com/projects/srilm/download.html 解凍・展開 mkdir srilm tar zxvf srilm.tgz -C srilm コンパイル 環境変数SRILMにSRILMを展開したディレクトリをセットしmake World cd srilm setenv SRILM `pwd` (cshの場合) make World コンパイル時にtcl.hが無い
SRILM - 長岡技科大 自然言語処理研究室
Download SRILM 名前や所属などを記入しなくてはならないが、無料でダウンロードできます。 Install makeの前に変更しなくてはいけないところがあります Makefile SRILMをおいた場所をかく SRILM := /home/makino/usr/local/src/srilm $SRILM/common/Makefile.machine.i686(マシンによってMakefileが違います) g++ , gcc の場所(おそらく/usr/bin/gcc。一応which gccで確認をしてください)、オプションを以下に変更。 GCC_FLAGS = -O2 -Wreturn-type -Wimplicit CC = /usr/bin/gcc $(GCC_FLAGS) CXX = /usr/bin/g++ $(GCC_FLAGS) -DINSTANTIATE_TEMPL
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
