はてなブックマーク

はじめに palmkit(Publicly Available Language Modelling toolKIT) は、N-gram 言語モデル作成のためのプログラム群である．このツールキットは， 多くのコマンド群からなる コマンドレベルでCMU-Cambridge SLM toolkitと互換性がある 任意のNについてのN-gramモデルのサポート 各種のback-off クラスモデルが作成可能 という特徴を持つ． このツールキットを使うことで，以下のような作業を簡単に行なうことができる． 単語頻度リストの作成 語彙リストの作成 back-off N-gram言語モデルの作成 back-off N-gram言語モデルの評価 また，このツールキットは，目的を問わず無料で利用・配布することができる． ファイル形式 palmkitでは，以下のようなファイルを扱う． .text 統計の元とな