Python による日本語自然言語処理
はじめに この文書は、 Steven Bird, Ewan Klein, Edward Loper 著 萩原 正人、中山 敬広、水野 貴明 訳 『入門 自然言語処理』 O'Reilly Japan, 2010. の第12章「Python による日本語自然言語処理」を、原書 Natural Language Processing with Python と同じ Creative Commons Attribution Noncommercial No Derivative Works 3.0 US License の下で公開するものです。 原書では主に英語を対象とした自然言語処理を取り扱っています。内容や考え方の多くは言語に依存しないものではありますが、単語の分かち書きをしない点や統語構造等の違いから、日本語を対象とする場合、いくつか気をつけなければいけない点があります。日本語を扱う場合にも
Google App Engine 日本語データのアップロード - Tommy Heartbeat 2nd
「utf-8 の csv をアップロードできると書いてあるんだけど…。」 Google App Engine には、クラウドのこちら側で作成した csv データをアップロードする機能がある。 http://code.google.com/intl/ja/appengine/docs/python/tools/uploadingdata.html ドキュメントによると、utf-8 で OK となっているので、日本語のデータも問題ないはずなのだが、実は単純には行かない。ドキュメントの通りにローダークラスを作るのはいいんだけれども、その中にある項目定義部分を書き換える必要があった。 ('title', str), ('artist', str) となっているのだが、このままだとエラーが出てしまう。 ('title', lambda x: x.decode('utf-8')), ('artist'
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
