日本語文字列コード問題まとめ
【1】 文字列コード問題との戦い Pythonに限った話ではないのですが、 日本語を取り扱うコードを書いていると やっかいなエンコーディングトラブルに遭う事は少なくないでしょう。 エンコーディングトラブルとは コンパイラ・インタプリタがソースコードを解釈できない。 画面表示が化ける。 意図した入力ができない。 エンコード・デコード時にエラーがでる。 正しいファイル名のつもりなのにファイルが見つからない。 出力させたファイルの中身が読めない。 などといった現象を基本としていろんな問題を引き起こします。 問題のすべては「コード変換」に発生します。 実際の文字列が何のエンコーディングで、 渡す先が何のエンコーディングを期待しているか？ それらを確認して合致させるように変換をするということが基本です。 【2】 「Python日本語版が必要」というのは誤解 P
Universal Encoding Detector: character encoding auto-detection in Python
Character encoding auto-detection in Python. As smart as your browser. Open source. >>> import urllib >>> urlread = lambda url: urllib.urlopen(url).read() >>> import chardet >>> chardet.detect(urlread("http://google.cn/")) {'encoding': 'GB2312', 'confidence': 0.99} >>> chardet.detect(urlread("http://yahoo.co.jp/")) {'encoding': 'EUC-JP', 'confidence': 0.99} >>> chardet.detect(urlread("http://amazo
Pythonと日本語 - KNarumiの日記
Pythonで日本語扱うのは結構面倒が多いのかも知れないと思った。Pythonの問題ってよりは環境の問題って気もするけど。 どっから考えるべきか分からんけどとりあえず実験用のファイルを作る。 # yakiniku.py print 'hello world' print '焼肉' print ['焼肉', 'spam'] 1行目はコメント。yakiniku.pyってファイルに上の内容を保存したとする。この時ファイルのエンコーディングが何かが重要になる。 試しにcp932*1で保存して実行してみる。実行したのはWinXPのコマンドプロンプト C:\hoge\hoge\hoge>python yakiniku.py File "fenc.py", line 2 SyntaxError: Non-ASCII character '\x8f' in file fenc.py on line 2,
【コラム】OS X ハッキング! (79) Carbon Emacsの設定(1) | パソコン | マイコミジャーナル
現在、「Monster iCarPlay for New iPod」の購入を検討中。シガーソケットに接続する充電アダプタとFMトランスミッタが一体化した製品で、長時間のドライブにも耐えられそう。ところで、そのiPodには「どんぐりころころ」やら「とんぼのめがね」といった童謡が増殖中です……親バカですいません。 さて、今回からはCarbon Emacsの環境設定術をとりあげたい。筆者が実際に利用している初期化ファイル「~/.emacs.el」を例に、コーディングシステムやフォントなど最低限必要と思われる設定を数回に分けて説明して行く予定だ。なお、掲載するリストの左端には行番号を掲載するので、そのままコピー&ペーストしないよう注意してほしい。 コーディングシステムの設定 Carbon Emacsにかぎらず、Emacsで日本語を扱うときにはコーディングシステムの設定が不可欠だ。以下のリストでは、
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Pythonの文字化け対策:sys.setdefaultencodingの謎 - ぎじゅっやさん
