The UTF-8-Everywhere Manifesto
As can be seen, UTF-16 takes about 50% more space than UTF-8 on real data, it only saves 20% for dense Asian text, and hardly competes with general purpose compression algorithms. The Chinese translation of this manifesto takes 58.8 KiB in UTF-16, and only 51.7 KiB in UTF-8. Text operations on encoded strings The popular text-based data formats (e.g. CSV, XML, HTML, JSON, RTF and source codes of c
MASATOの開発日記: Shift_JISとUnicodeの変換用関数
Shift_JISとUnicodeの変換用関数 環境 Visual C++.NET 2003 以前書いたコードのバージョンアップ版です。 仕様は以前と同じです。若干コードがスマートになっている・・・かもしれません。 Unicodeからマルチバイト文字(Shift_JIS)への変換関数 std::string UnicodeToMultiByte(const std::wstring& Source, UINT CodePage = CP_ACP, DWORD Flags = 0); std::string UnicodeToMultiByte(const std::wstring& Source, UINT CodePage, DWORD Flags) { std::vector<char> Dest(::WideCharToMultiByte(CodePage, Flags, Sourc
Office 2010 向けに日本語互換フォントパッケージが無償提供されたらしい: ある SE のつぶやき
MSがOffice 2010で日本語フォント環境を強化 - ニュース：ITpro Office 2010 では、JIS2004(JIS X 0213:2004) 規格に、よく使用される以下のフォントが対応した模様(以下、フォントA)。 HG丸ゴシックM-PRO HG明朝E HGゴシックE HG創英角ポップ体 HG創英角ゴシックUB Windows Vista/7 では、標準で以下のフォントしか JIS2004 規格に対応していなかったのですが、対応フォントが Office 2010 で増えたようですね(以下、フォントB)。 MS ゴシック MS Ｐゴシック MS UI Gothic MS 明朝 MS P 明朝 ただ、JIS2004 フォントになってしまうと、それはそれで互換性の問題が起きるので、以下のフォントパッケージが無償提供されました。 ダウンロードの詳細 : Microsoft Of
るびま
『るびま』は、Ruby に関する技術記事はもちろんのこと、Rubyist へのインタビューやエッセイ、その他をお届けするウェブ雑誌です。 Rubyist Magazine について 『Rubyist Magazine』、略して『るびま』は、日本 Ruby の会の有志による Rubyist の Rubyist による、Rubyist とそうでない人のためのウェブ雑誌です。 最新号 Rubyist Magazine 0058 号 バックナンバー Rubyist Magazine 0058 号 RubyKaigi 2018 直前特集号 Rubyist Magazine 0057 号 RubyKaigi 2017 直前特集号 Rubyist Magazine 0056 号 Rubyist Magazine 0055 号 Rubyist Magazine 0054 号 東京 Ruby 会議 11 直
日本語文字列コード問題まとめ
【1】 文字列コード問題との戦い Pythonに限った話ではないのですが、 日本語を取り扱うコードを書いていると やっかいなエンコーディングトラブルに遭う事は少なくないでしょう。 エンコーディングトラブルとは コンパイラ・インタプリタがソースコードを解釈できない。 画面表示が化ける。 意図した入力ができない。 エンコード・デコード時にエラーがでる。 正しいファイル名のつもりなのにファイルが見つからない。 出力させたファイルの中身が読めない。 などといった現象を基本としていろんな問題を引き起こします。 問題のすべては「コード変換」に発生します。 実際の文字列が何のエンコーディングで、 渡す先が何のエンコーディングを期待しているか？ それらを確認して合致させるように変換をするということが基本です。 【2】 「Python日本語版が必要」というのは誤解 P
Delphi 6 ローテクTips - カルト・ドラン
Delphi6 ローテクTips 高度な技もなければ確かな知識もない。 それでもなんとかしようと悪戦苦闘。 そんな私の力技Tips。 ※Windows95,98,meはまったく考慮に入れていません。 Vistaは動作環境がないので考慮に入れられません。 Windows 7、8に関しては一部で検証していますが、基本XPのみです。 疑問点や要望、間違いの指摘などありましたらプログラム掲示板までお願いします。 目次 文字列 マルチメディア 数値 その他 メモ 文字列 Unicode Unicode対応コンポーネント Unicode対応のフォルダ選択ダイアログ Unicode対応のTOpenDialog Unicode対応のTSaveDialog Unicode対応のTLabel Unicode対応のTListBox Unicode対応のTComboBox TStringsにUnicodeな文字を
サロゲートペア入門：CodeZine
はじめに Windows VistaのJIS2004対応により、WindowsのUnicode環境で使用できる日本語漢字の数が増えました。従来、12238字（Windows XP）だったのが13145字（Windows Vista）になり、907字追加されることになりました。これによって、JIS第3水準、JIS第4水準の漢字がすべてサポートされることになったのです（Windows XPまでは一部サポート）。 またWindows XPでも、パッチさえ当てれば、Windows Vistaと同じように追加907字を加えた13145字の漢字が使用できるようになりました。 ところが、この追加された907字の中には「サロゲートペア」という特殊な文字が304字あり、これらは今までのUnicodeの文字とは扱いが少し違います。この点について解説していきたいと思います。 対象読者 Unicode
Unicode の surrogates pair について その1
とりあえず、一発目がなぜこのネタなのか？ってのは置いておいて。。。 Vista で Unicode の surrogates pair を容易に扱えるようになったのでその検証。 MSDN だと下記で解説されているんですが、 Surrogates and Supplementary Characters 難しいところをすっ飛ばして、簡潔に説明すると Unicode (UTF-16) は 1文字2Byte で構成されるんですが、それを 4Byte まで拡張するしくみ。 ここまで読んでぎょっとした人もいるかも知れませんが、そんなに心配する必要は正直ないです。 というのは、surrogates pair は通常の API で扱う場合、文字長が2文字として扱われるからです。 とりあえず、検証したところ lstrlenW はもちろんのこと、legacy の VB の Len とかも surrogate
Unicode SynEdit | mh-nexus
Unicode SynEdit This is the Unicode version of SynEdit, which is kept in sync with the ANSI version found on the SynEdit website. It is currently in a separate branch of SynEdit CVS and will become the main distribution in the future, since it was made by a member of the SynEdit team. Please, don't contact me directly for UniSynEdit, use the mailing lists or the bug tracker. Features of Current Ve
TNT Unicode Controls | mh-nexus
Unicode Exceptions This package is based on Troy Wolbrink's TNT Unicode Controls and adds support for Unicode exceptions. Especially the file stream exceptions were adapted to display Unicode filenames in the error messages. If you want your own exception classes to support Unicode, you have to descend them from WideException (TntSysUtils.pas) instead of Exception. Usage is as normal except that
[debian-users:47539] pear利用時ののmsql.soについて
From: Masuda <macindows@xxxxxxxxxxxxxxxx> Subject: [debian-users:47539] pear利用時ののmsql.soについて Date: Sat, 28 Oct 2006 19:04:43 +0900 List-help: <mailto:debian-users-ctl@debian.or.jp?body=help> List-id: debian-users.debian.or.jp List-owner: <mailto:debian-users-admin@debian.or.jp> List-post: <mailto:debian-users@debian.or.jp> List-software: fml [fml 4.0.3 release (20011202/4.0.3)] List-unsubscribe: <
GNU Gettext for Borland Delphi, C++ Builder and Kylix
1.2.2 released This is the first maintenance release for a long time, and provides a number of minor fixes. A safe choice for business There is normally not much news for dxgettext, since it basically just works. New Delphi versions, new Windows versions etc., it just works. But I need to make a statement on the GPL3 license. The licenses of this translation system have been picked to be extremely
Life with Cygwin
沖ソフトウェア株式会社は、沖通信システム株式会社および株式会社沖インフォテックと平成22年10月1日をもって合併いたしました。新会社名は、株式会社OKIソフトウェアとなります。3社が行っております事業は新会社にて従来通り継続いたします。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
: Downloads
はてなブログ | 無料ブログを作成しよう
ＤＥＫＯのざつだん。
サイト移転のお知らせ(Mr.XRAY)
某所 - Tiburon でUnicode はこうなる
http://www.icu4pas.org/index.html
Translations of the Tower of Babel