H21冬学期 数理言語情報論
2009/10/7 第1回講義「導入」 パワーポイント2007(推奨) パワーポイント97-2003 PDF 2009/10/14 第2回講義「文法理論(1): CFG, TAG, Dependency Grammar」 パワーポイント2007(推奨) パワーポイント97-2003 PDF 2009/10/21 第3回講義「文法理論(2): CCG」 パワーポイント2007(推奨) パワーポイント97-2003 PDF 2009/10/28 第4回講義「文法理論(3): 型付素性構造とHPSG」 パワーポイント2007(推奨) パワーポイント97-2003 PDF 2009/11/4 第5回講義「文法理論(4): HPSG」 パワーポイント2007(推奨) パワーポイント97-2003 PDF 2009/11/11 第6回講義「確率的CFG(1): PCFG導入」 パワーポイント2007(
最大エントロピー原理 - Wikipedia
最大エントロピー原理（さいだいエントロピーげんり、英: principle of maximum entropy）は、認識確率分布を一意に定めるために利用可能な情報を分析する手法である。この原理を最初に提唱したのは Edwin Thompson Jaynes である。彼は1957年に統計力学のギブズ分布を持ち込んだ熱力学（最大エントロピー熱力学（英語版））を提唱した際に、この原理も提唱したものである。彼は、熱力学やエントロピーは、情報理論や推定の汎用ツールの応用例と見るべきだと示唆した。他のベイズ的手法と同様、最大エントロピー原理でも事前確率を明示的に利用する。これは古典的統計学における推定手法の代替である。 概要[編集] 今確率変数 X について、X が条件 I を満たす事だけが分かっており、それ以外に X に関して何1つ知らなかったとする。このとき、X が従う分布はどのようなものである
Survey Kanakanji
Survey Kanakanji - Presentation Transcript かな漢字変換エンジンの基礎 萩原研究室 M2 奥野 陽 本発表の目的 かな漢字変換エンジンの基礎 奥野陽 かな漢字変換に関する情報のシェアとディスカッション 「日本語入力」と「かな漢字変換」 「日本語入力」 と「かな漢字変換」は使い分ける Social IME は「日本語入力」についての研究 かな漢字変換エンジンの基礎 奥野陽 日本語の入力方式 ・かな漢字変換 ・予測入力 ・音声入力 ・手書き入力 かなを漢字に変換するエンジン ・入力：ひらがな文 ・出力：漢字かな混じり文 (Input Method: 日本語に限らず入力方式 ) かな漢字変換の歴史 ヒューリスティクス (80 年代） Canna,Wnn 人手による地道なパラメータ調整 確率的言語モデル (2000 年代） MS IME2007, A
ChaIME: Statistical Input Method Editor
ChaIME: 大規模コーパスを用いた統計的仮名漢字変換 トップに戻る 統計的仮名漢字変換 統計的仮名漢字変換では、与えられた仮名文字列の入力yに対して変換候補 xを条件付き確率P(x|y)の降順に提示します。仮名文字列が来たときに仮名漢字 交じり文になる確率です。この確率値が高い順に変換結果が並んでいて くれればいいわけです。言い換えると、確率値最大のものがもっとも尤もらしい 変換候補となり、尤もらしさ順に確率値が並んでいることが統計的仮名漢字変換 の基本原理となります。 さて、直接P(x|y)を推定する方法があればそのまま仮名漢字変換に用いること ができるのですが、一般にこの確率値を直接推定することは難しいため、 近似を用いて推定することになります。 この定式化は統計的機械翻訳や音声認識と同様で、ベイズの定理を用いることに よってP(x|y)はP(y|x)とP(x)の積として推定するこ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://unicorn.ike.tottori-u.ac.jp/murakami/doctor/doctor.pdf
