日本語のファイル名でダウンロードさせる
ちょっと日本語のファイルをダウンロードさせる必要があっていろいろ調べてみた。 が、RFC2231に従えだの、IEは独自路線突っ走ってるだの書いてあって かなりややこしそうだった。 結局どうすればいいんだということで、試した結果をまとめてみた。 とりあえず以下のページを参考にしながら検証ページを作成。 日本語ファイル名 添付ファイルにおける日本語のファイル名に関して 作成したページはこちら ダウンロードさせるファイル名は「日本語'ファイル.txt」 ファイルにはContent-Dispositionが書き出されます。 このURLにマルチバイト文字を入れてる理由は、 ブラウザごとにURLのマルチバイト文字のエンコーディングが 違うみたいだからそれを調べるために入れてます。 ブラウザの判定にはBrowser Detection with PHPを 使用しています。 Content-Disposi
ubuntu覚え書き：コンソールの文字化け対策 | さあもん写心館
ubuntuのコンソール画面（X window system、つまりGUI環境じゃなくて、Ctrl+Alt+F1でテキスト画面になった場合のコンソールね）で、日本語が文字化けするときの対策。 ホームディレクトリの.basurc.bashrcに以下の行を追加 case $TERM in linux) LANG=C ;; esac 前は、 case $TERM in linux) LANG=C ;; *) LANG=ja_JP,UTF-8 ;; esac とやっていたのですが、今度はGUI環境で文字化けが出る始末。 なので上のように変更。 やっていることは至極簡単。 端末の種類を表す環境変数$TERMがlinuxだった場合に言語設定を英語に変更する。これだけ。 $TERMがlinuxならば、それはすなわちCUI環境でコンソールが立ち上がっているということだから。
文字コードについて
文字コード、標準化について 文字コードについての実用的な説明です。 文字コード表 JIS X 0201、JIS X 0208、JIS X 0213のJIS、EUC-JP、Shift_JIS、Unicodeの文字コード表と、JIS X 0221のUnicodeの文字コード表です。 JIS X 0211 の制御コード表（JIS制御コード） JIS X 0201 の文字コード表（JISローマ字：ASCII、JISカナ） JIS X 0201 の文字コード一覧（Unicode対応） JIS X 0208 の文字コード表（JIS漢字：第1・第2水準） JIS X 0208 の文字コード一覧（Unicode対応） JIS X 0213 の文字コード表（JIS漢字：第1・第2・第3・第4水準） ［UTF-8テキスト版］ Unicode、常用漢字、人名漢字対応 JIS X 0213 の文字コード一覧 ［U
Unicodeを使用した多言語データベースのサポート
6 Unicodeを使用した多言語データベースのサポート この章では、Oracleデータベース環境でのUnicodeの使用方法について説明します。 この章の内容は、次のとおりです。 Unicodeの概要 Unicodeの内容 Unicodeソリューションのデータベースへの実装 Unicodeの事例 複数言語サポートのためのデータベース・スキーマ設計 Unicodeの概要 同じアプリケーションやデータベース内で多数の異なる言語を処理することは、長い間複雑で困難な処理でした。既存の文字エンコーディングの制約を克服するために、1980年代の後半、複数の組織がグローバル・キャラクタ・セットの作成に着手しました。グローバル・キャラクタ・セットの必要性は、1990年代中頃に入り、World Wide Webの発展とともにますます大きくなりました。インターネットの普及によってビジネスの形態が変化し、グロ
Solarisの文字コードを指定する | 渋谷生活
Solarisの文字コード、ロケールを設定する。 ■よく使う文字コードを設定する .profileによく使う文字コードを設定しておく UTF-8 LANG=ja_JP.UTF-8 export LANGEUC_JP LANG=ja_JP.eucJP export LANGShift_JIS LANG=ja_JP.PCK export LANGUS LANG=en_US.ISO8859-1 export LANG ■Tomcatなどのアプリケーションに影響するLANGを設定する LC_CTYPEをja_JP.UTF-8等に設定することで、Tomcatでファイルアップロードするときの文字化けを防ぐことができる。
[MAN][CentOS5] kcc(1)(ja) - Blue21
KCC Section: Local Commands (L) Updated: 1992年11月19日 Index Return to Main Contents 名前 kcc - 自動判別機能つき漢字コード変換 形式 kcc [ -IOchnvxz ] [ -b bufsize ] [ file ] ... 機能説明 kcc は，指定した file を順番に読み込み，漢字コードを変換して標準出力に出力するフィルターです。 ファイルの指定がないとき，あるいはファイル名として - が指定されたときには標準入力から読み込みます。入出力の漢字コードはオプシ ョンで指定しますが，入力コードを指定しないとファイルごとの自動判別になり ます。 使える漢字コードは JIS（7 ビットおよび 8 ビット），シフト JIS，EUC，DEC です。 入力コードは，EUC，DEC あるいはシフト JIS のい
Universal Encoding Detector: character encoding auto-detection in Python
Character encoding auto-detection in Python. As smart as your browser. Open source. >>> import urllib >>> urlread = lambda url: urllib.urlopen(url).read() >>> import chardet >>> chardet.detect(urlread("http://google.cn/")) {'encoding': 'GB2312', 'confidence': 0.99} >>> chardet.detect(urlread("http://yahoo.co.jp/")) {'encoding': 'EUC-JP', 'confidence': 0.99} >>> chardet.detect(urlread("http://amazo
Python でエンコーディングを判定する - 傀儡師の館.Python：楽天ブログ
2008.05.25 Python でエンコーディングを判定する (1) テーマ：プログラミング言語 Python を使う(336) カテゴリ：Python Python でエンコーディングの自動判定をするにはいくつかの方法がある。文字列のコードを直接調べてその情報だけで判定するタイプと、HTML や XML ファイルに含まれるメタ情報なども利用し、そうした情報で判定できないものは文字コードの情報から判定するタイプがある。 前者のタイプでは、pykf や、nkfpython、kanjilib などがある。pykf は、ShiftJIS, EUC-JP, JISコードを相互に変換するためのPython拡張モジュールで、Universal Encoding Detector や encutils のようには、メタ情報を使わない直接文字コードをチェックするタイプ。日本語のみを前提とするのであれば
Jcode.pm
Jcode.pm - jcode.pl の後継、Encode.pm への架け橋 [英語][日本語] Last Modified:Sunday, 11-May-2008 03:16:47 JST by Dan Kogai Perl 5.8.0 より、Jcodeの全機能は Encode module を通じてPerlに標準装備となります。Jcodeのメンテナンスは旧Perlのために 今後も続けていく所存ですが、最新のPerlをお使いの方には、より高機能、高 性能、そしてなんといっても標準装備の Encode の方をお薦めします。 Jcode 2.0 より、お使いの Perl Version が 5.8.1 以降の場合は Encode の Wrapper として機能するようになりました。 この場合、Jcode.pm は付属モジュールを必要としないため、 jcode.pl の 場合と同様、Jcod
Google デスクトップで検索できない <- コンピュータ <- 徒然なるままに <- Iranoan
Error: Couldn't open cidToUnicode file 'C:/Resource/Adobe-Japan1.cidToUnicode' Error: Unknown character collection 'Adobe-Japan1' 等とエラーが出る。(どちらになるかは状況による) そこで Google って見た結果、次の手順を踏むと、全てではないが、今までインデックスが上手くいかなかった PDF ファイルの幾つかは、ある程度上手く検索できるようになった。 Xpdf: Download から xpdf-japanese.tar.gz をダウンロード 日本語以外の場合も、言語に応じたファイルをダウンロードすれば良いだろう xpdf-japanese.tar.gz を展開 「xpdf-japanese」というフォルダが出来上がる 適当なフォルダを作成 (ここでは
文字コード変換
例えば、"A"の文字コードは 65(0x41) ですが、各言語で"A"を与えると65を返す関数は、言語により様々です。 ここでは、数値をコードとみなして文字に変換する関数や、その逆に文字のコードを数値として返す関数について述べます。 また、数値 123 を与えると文字列 "123" を返す関数と、その逆の関数について述べます。 特に説明のない限り、整数型と文字列型の間での変換を対象とします。
Cannot decode string with wide characters
use utf8; binmode STDOUT, ':utf8'; binmode STDIN, ':utf8'; use strict; use Encode; sub main(){ #UTF-8(BOMなし),CRLFのファイルに書いてます。 my $str = "あ"; my $bin = $str; $bin = Encode::encode('euc-jp', Encode::decode('utf8', $str)); $bin = Encode::encode('utf8', Encode::decode('euc-jp', $bin)); print "Content-Type:text/plain;charset=UTF-8\n"; print "\n"; print $bin; } &main; ======================= 希望する出力結果: あ
Nix::WebLab: Cannot decode string with wide characters
XML::RSS と Encode の組み合わせで以下のエラーが発生。 Cannot decode string with wide characters 最初に目にした記事がこちら。 Encode.pm ではまった なるほど。（って実は良く分かってない...） 次に見つけたのがこちら。 perl//Encode Q&A にこんなやり取りがありました。 質問: >Wide character in subroutine entry at /path/to/perl/lib/Encode.pm line 154. と言われて死にます。 Encode の bug ですか? いえ、おそらく仕様です。 このエラーが出て死ぬ原因は、 decode の入力文字列が utf8 (Wide character) 形式になっている、つまり U+0100 以上の文字が含まれていることにあります。 Enc
URI::Escape
NAME URI::Escape - Percent-encode and percent-decode unsafe characters SYNOPSIS use URI::Escape; $safe = uri_escape("10% is enough\n"); $verysafe = uri_escape("foo", "\0-\377"); $str = uri_unescape($safe); DESCRIPTION This module provides functions to percent-encode and percent-decode URI strings as defined by RFC 3986. Percent-encoding URI's is informally called "URI escaping". This is the termin
Jcodeを使おう(実用本位のJcode紹介)
この講演資料は、Jcodeの全ての事柄を網羅しているわけではありません。 現時点でJcodeを使い始める上で知っておくべき情報をまとめたものです。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Linuxの標準コンソールで文字化けを防ぐ - Hatena::Diary::Ubuntu
OTN Japan - 404 Error
http://www.srekcah.org/jcode/
URI::Query
Spidering Hacks