PythonにおけるUnicodeとUTF-8の相互変換 - CtrlShift.net
IT業界の動向、ソフトウェア開発技術、ネットの情報、アイデアをまとめて配信プログラミングで文字列を扱う際には、文字コードに注意することが大切です。 特に、Web上のデータをかき集めようと思ったら、様々な文字コードに出会うことになるので、文字コードの判定方法と変換方法は覚えておかねばならない、重要な項目の一つです。 と言いつつも、Pythonの文字コードに関する作法が、個人的によく忘れがちで、「あれ?!エラーが出たぞ!!」なんてことがしばしば。 しかし、これからはそんなことが起きないように、文字コードの変換方法をここに備忘録として記述しておこうと思います。 まず、UTF-8からUnicodeへの変換方法。 uni_text = unicode(utf_text,'utf-8') そして、UnicodeからUTF-8への変換方法。 utf_text = uni_text.encode('utf
サクラエディタUnicode版って良いね - 蒼い海に溺れて2nd season
Windowsのメモ帳はシンプルで良いのだが、EUC-JPや改行コードの変換に対応できない。ま、そういうデータ扱ったことのある人なら基本的に知ってるわな。なので、EUCとか改行コード云々とか言うデータを扱うためには何かしらのテキストエディタが必要になる。んで、そういう目的に使うエディタとして現在サクラエディタを使用中。 さてこのサクラエディタ、通常版はShift_JIS外の文字がまったく使えない。まぁ基本的には差し支えはないが、Exposéみたいな単語を表記するとき文字化けを起こしてとっても不便。なので今回、パソコンをちょっと初期化したついでにサクラエディタをUnicode版へと切り替えてみた。 使ってみた感想としては結構いける。通常のインストーラー版と違いヘルプなどが付属していないため必要なものを自分で補わないといけないが、ちゃんとそろえれば通常版以上の性能を発揮してるね。ベータ版とかそ
[Pythonゲーム修行]google app engine のユニコードの処理に苦しんだ方への処方箋 | hikaliの開発日誌
AS3ゲーム修行 (6) hikaliのゲーム論 (24) pythonゲーム修行 (22) [エントリー一覧] (15) 【自作ゲームブック】 (10) ＭＳ解体新書 (3) エイゴ修行 (25) ゲームブック解析 (10) ゲームブック解析 -MG- (8) ゲームブック解析 -FG- (37) ゲームブック解析 -HG- (67) ゲームブック解析 -NG- (81) ゲームブック解析 -PG- (2) ゲームブック解析 - - (20) ゲームブック解析 一覧 (2) サッカー (57) ネタ放出エントリー (15) フルHD漫遊中 (16) ミニゲームブック更新 (5) 映画評 (53) 暇 (22) 開発日誌 (111) 関西周遊乗り鉄の旅 (4) 香港旅行 (21) 細密GB解析 (3) 雑感 (61) 雑記 (201) 自作小説 (110) 実験 (3) 書評 (14)
![[Pythonゲーム修行]google app engine のユニコードの処理に苦しんだ方への処方箋 | hikaliの開発日誌](https://cdn-ak-scissors.b.st-hatena.com/image/square/24133cdb3e75486beae9b818d03fadade830c0fa/height=288;version=1;width=512/http%3A%2F%2Fimaging.jugem.jp%2Ftemplate%2Fimg%2Fjugem_og-image.png)
PythonのUnicodeEncodeErrorを知る - HDEラボ
Pythonにはじめて触って、いつのまにか1年が過ぎたのですが、一番はまったのは、やっぱりunicodeの扱いだったと思います。 特に、 UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-12: ordinal not in range(128) のようなエラーにはさんざん悩まされました。ここがたとえばrubyなど他の言語と比べてわかりにくいために、Pythonが取っつきにくい言語になっているのではないか、と個人的には思います。 そこで、このエラーに関係するはまりどころとTipsをいくつか列挙してみました。これからPythonに触れられる方の参考になればと思います。 なお、環境はUNIX上のPython 2.4, 2.5を想定しています。 u1はunicode型で、s1はstr型です。s1にどのよ
Pythonのエンコーディングでよくはまるのでメモ - suztomoのはてなダイアリー
Python温泉に来て以前貰ったReal World Haskellを読み進めています．Haskellとは関係ないですが，さっきUnicodeとかutf-8とかのエラーについてさぼてんの人や@tokibitoさんや@whosaysniさんに教えてもらったのでメモ． Pythonのstringはbyte列であり，Unicode文字列は内部でどのような表現が使われているかプログラマが意識しなくていいというのがミソだった．どのようなbyte列であるかを指定するにはUnicode文字列を作成するとき*1や，Unicode文字列をPythonの外に出す(端末への出力やファイルへのリダイレクト)ときに指定する必要がある． 具体的には端末上では動いているけれどもファイルへリダイレクトするときにエラーがでるときがある．これは端末はUnicode文字列をどのようなバイト列で出力すればいいかを教えてくれるとい
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
