JavaScript has a Unicode problem · Mathias Bynens
The way JavaScript handles Unicode is… surprising, to say the least. This write-up explains the pain points associated with Unicode in JavaScript, provides solutions for common problems, and explains how the ECMAScript 6 standard improves the situation. Unicode basics Before we take a closer look at JavaScript, let’s make sure we’re all on the same page when it comes to Unicode. It’s easiest to th
Unicode and JavaScript
Update 2013-09-29: New sections 4.1 (“Matching any code unit”) and 4.2 (“Libraries”). This blog post is a brief introduction to Unicode and how it is handled in JavaScript. History Unicode was started in 1987, by Joe Becker (Xerox), Lee Collins (Apple) and Mark Davis (Apple). The idea was to create a universal character set, as there were many incompatible standards for encoding plain text at that
アレはどこから来たの？ - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
Unicodeっていうと、まあ、なんでもありなかんじもしますけど、結局、JIS規格にもなるわけですよね。*1 当然、そうなるね。 JIS規格にアレが入るんですか？ うん。JIS規格にアレ。まあ、すでにあんなのの例もあるけどね。 でもそれには、ケータイ絵文字というソースがありますよね。中指のアレのほうはどこから来たんですか？ うーん、ちょっと長くなるけど、アレを押し込んだアイルランドの理屈を大ざっぱに言うと……。まず、たとえば親指を立てたジェスチャーは、ヨーロッパやアメリカでは肯定的な意味を持つけど、これが侮辱的な振る舞いとなる文化も存在する、と。 あー、そういう話、聞いたことあるかも。 つまり、「ある文化においては侮辱的な意味を持つハンドジェスチャー」のいくつかが、すでにUnicodeに入っている、と。 はいはい。 そうである以上、「よりユニバーサルに認識されている侮辱的な意味を持つハンド
Counting characters
<g> <g> <defs> <rect id="SVGID_1_" x="-468" y="-1360" width="1440" height="3027" /> </defs> <clippath id="SVGID_2_"> <use xlink:href="#SVGID_1_" style="overflow:visible;" /> </clippath> </g> </g> <rect x="-468" y="-1360" class="st0" width="1440" height="3027" style="fill:rgb(0,0,0,0);stroke-width:3;stroke:rgb(0,0,0)" /> <path d="M13.4,12l5.8-5.8c0.4-0.4,0.4-1,0-1.4c-0.4-0.4-1-0.4-1.4,0L12,10.6L6.2
The WHATWG Blog — WHATWG Weekly: Unicode for the platform?
Please leave your sense of logic at the door, thanks! WHATWG Weekly: Unicode for the platform? February 22nd, 2012 by Anne van Kesteren in Weekly Review In less than a year we reached another arbitrary milestone. HTML is another thousand revisions further, now over 7000 (not quite 9000). This is the WHATWG Weekly. Over on [email protected], the mailing list used by TC39 (responsible for JavaScript
ウノウラボ Unoh Labs: Mac OS X上のUnicode
Firefoxは内部的に変換処理を行うようになっているようです。 問題はSafariとOperaですね。 選択されたファイルのパスからJavaScriptで ファイル名を抜き出してタイトルに設定する部分で、 正しく扱えるような文字コードに変換することにしたいと思います。 基本的な流れとしては、UTF-8-MAC特有の「U+3099」（COMBINING KATAKANA-HIRAGANA VOICED SOUND MARK）、 「U+309A」（COMBINING KATAKANA-HIRAGANA SEMI-VOICED SOUND MARK）がファイル名に含まれている場合は、 その前の文字と結合して濁音・半濁音の文字にしてあげればいいでしょう （ひらがな・カタカナのみの暫定的な対処に過ぎませんが）。 変換用の文字テーブルを用意して、逐一変換していくかたちにしたいと思います。 というわけ
なぜ「オレンジ色の本」は紫色なのか - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
Unicode絵文字に「オレンジ色の本」（U+1F4D9 ORANGE BOOK）ってあるじゃないですか。 うん。auがソースだっけ。 それが、Lionの絵文字で表示したら、ほら、紫色なんですよ。 ああ、それね。もっと大きいサイズで表示すればオレンジ色になるよ。 えーっ、ホントですか？ いや、ウソだけどさ。 ……。 ま、座れよ。マジレスすると、絵文字の場合、Unicodeの文字名に入ってる色の情報は、そのまま実装しなくてもいいんだよ。文字名と実装の色が一致しない絵文字って、けっこうあるぜ。このあたりとか。 でもそれは、もともとUnicodeに入っていた白や黒の文字に、ケータイ絵文字が統合されちゃった例ですよね。純粋なケータイ絵文字とは違うんじゃないですか。 そうでもないんだな。たとえばこの緑と紫のボタンなんてSoftBank絵文字だけをソースとしてUnicodeに入ったんだけど、文字名は黒
auとSoftBankのiPhoneにおける絵文字対応を比較する - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
これまでauのiPhoneは、絵文字の扱いにおいてSoftBankに遅れをとっていた。が、2012年1月27日午前9時、状況が変わった（au「Eメール絵文字のiPhone 4Sへの対応予定のお知らせ」）。そこで今回は、au iPhoneから送信した絵文字が相手のケータイにどのように伝わるのか、SoftBank iPhoneと比較しながら確認してみようと思う*1。 Unicode絵文字を他のキャリアの絵文字に変換する際、auのゲートウェイはUnicodeの絵文字テーブル（EmojiSources.txt）をベースとした表を用いる。このため、au絵文字にない文字であっても変換することができる。一方、SoftBankの他社向け変換はSoftBankのSift_JIS経由であるため、SoftBank絵文字にない文字には対応できない。SoftBank iPhone発のメッセージがSoftBank絵文
ちょっと気になるUnicode絵文字の例示字形 - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
Unicode絵文字の例示字形については、これまでにもいくつかのテーマで言及したことがあるが、今回は少しだけ気になるものを、ランダムに複数挙げてみる。 U+1F438（下図）は、カエルだとわかっていればカエルに見えるのだが、油断すると、垂れ目（本当は鼻の穴）で黒っぽい耳（本当は目）の謎のゆるキャラに見えてくる。 ひょっとして、これ（下図）を描いた人はパンダの目のまわりの黒いところ全体を目だと思ったのだろうか（ハイライトが大きすぎ）。このグリフは、Appleカラー絵文字にもそのまま入っている。 大きくATMと書いてあるので（下図）、まあ、ATMだとはわかるんだけど。 バスタブ（下図）で隠れている部分のカラダの構造がどうなっているのか、よくわからない。
Unicode絵文字と各キャリアの絵文字の対応表 - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
ケータイ同士の絵文字対応表は各キャリアが公開しているが、Unicode絵文字と各キャリアの絵文字の対応表が見当たらなかったので*1、作ってみた。 以下の図は、「LionのMailから各キャリアのケータイに絵文字*2を送るとどのように表示されるか」を表していると考えて差しつかえない*3。前回のエントリで述べたように、LionのMailからケータイに絵文字を送る場合、相手の環境で表示できないものが1文字でも含まれているとcharset=UTF-8で送信され、すべての絵文字が「・」や「?」になってしまうので、事前にぬかりなくご確認を。 *1:Emoji Symbols: Background Data（http://www.unicode.org/~scherer/emoji4unicode/snapshot/utc.html）はあるのだけれど、絵文字の画像がリンク切れだったりする。 *2:図の
開発者向けUnicode FAQ--もう知らないではすまされない - builder by ZDNet Japan
クラウドネイティブの実現 モダンインフラの構築・運用の課題解決へ コンテナの可能性を広げるVMware Tanzu DX時代のアプリケーションセキュリティ 未来革新プロジェクトに邁進するSOMPO 基幹システムのモダナイゼーションに迫る VMware 渡辺氏に聞く 顧客のデジタル変革のために 自らも改革を続けるヴイエムウェアの戦略 日清食品グループのDX（前編） 現場が主役のDXのススメ トップの強い意思で変革に弾み Microsoft 365のデータは安全か？ クラウド型アプリを採用する企業のための 包括的なデータ保護のありかたを解説 ともにDXを推進する コンテナ化されたワークロードを管理 継続的な価値を生みだす「協創」への挑戦 ITインフラ運用からの解放 HCI＋JP1による統合運用による負荷激減で 次世代IT部門への役割変革へ一歩前進 エンドポイントセキュリティの転機 情報セキュリ
なぜAppleカラー絵文字のプードルには眉毛があるのか - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
ここに2匹のプードルがいるんだけどね。 間違い探しですか？ ズバリ、左にだけ眉毛がありますね。 うん。眉毛があるほうが、iPhoneやLionに入ってる絵文字フォントのプードル。眉毛のないほうが、Unicodeのコードチャートに載ってるプードル。 えっ、どういうことですか？ そもそもUnicodeにケータイ絵文字を入れようって提案したのがGoogleとAppleだからね。提案書のための絵文字をAppleが用意して、それがUnicodeに収録された。そのあとで、iPhone絵文字に含まれていなかった文字については、データを流用して絵文字フォントに追加したってことじゃないかな。 だからほとんど同じなんですね。でも、眉毛はどうなりました？ ケータイ絵文字をUnicodeに収録する過程では、いろいろあってさ。たとえば、日本の絵文字のマンガっぽさをめぐる戦いとか。ほら、アイルランド・ドイツ修正案って
Twitterで見かけるハミ出した顔文字の正体 - RyoAnna
少し前からTwitterで見かけるようになった、上下に飛び出す変な顔文字。 気持ち悪いのであまり関わらないようにしていたのだが、この顔文字の謎が明らかになったのでお伝えしたい。 いつものようにiPhoneのApp Storeをぶらぶらしていた時のこと。 Unicoder Lite (App Store)というアプリが気になりダウンロードした。 起動するとなにやら見慣れた文字が。 顔文字でよく使われるギリシャ文字やキリル文字だ。 しばらく眺めているとこんな符号が。 合成用区分符号 これが上と下の行にはみ出す顔文字の正体だった。 ためしに作ってみよう。 ベースとなる顔文字を置く。 左目に合成用区分符号を入れる。 続いて右目に。 見事にはみ出す。 Unicode（ユニコード）とは、世界中のコンピュータの文字を符号化したもの。その "U+0300-036F" に配置されているダイアクリティカルマー
yebo blog: Mac OS X 10.7 Lionで絵文字をサポート???
2011/02/26 Mac OS X 10.7 Lionで絵文字をサポート??? iSpazioが、昨日リリースされたMac OS X Lionの開発者プレビューで日本の絵文字が使えることを確認したそうだ[razorianfly]。iOSでは絵文字がサポートされているし、Unicode 6.0で絵文字が標準化されたので、Mac OS Xに実装するのはそれほど難しい事ではない。絵文字は、Twitter、Mail、Skypeなどほとんど全てのアプリケーションで利用できるとの事。 投稿者 zubora 投稿時間 09:59 ラベル: Apple, Life, Mac 0 コメント: コメントを投稿
各ブラウザのUTF-7の対応状況 - 葉っぱ日記
今時のブラウザがどれくらいUTF-7をまだサポートしているか調べてみたのでメモ。全てWin32上。 IE8 レスポンスヘッダでcharset=utf-7と指定したとき、およびコンテンツの先頭(<html>より前)にUTF-7のBOMである +/v8- を挿入しておいた場合にUTF-7となる。<meta>でcharset=utf-7と指定した場合はページを表示したときにはUTF-7とはならないが、リロードするとUTF-7となる。 IE9beta レスポンスヘッダでcharset=utf-7と指定したとき、およびコンテンツの先頭(<html>より前)にUTF-7のBOMである +/v8- を挿入しておいたとき、<meta>でcharset=utf-7と指定したときにそれぞれUTF-7となる。 Firefox 3.6.13 <meta> で charset=utf-7 と指定しておくと、ページを
asahi.com（朝日新聞社）：日本ＩＴ界の鬼っ子「外字問題」解消を 経産省が着手 - 社会
「外字（がいじ）」。コンピューターで使う漢字として日本工業規格（ＪＩＳ）が定めた約１万字に含まれない、規格外の文字たち。文字化けや正常なデータ通信ができない原因になり、ＩＴ業界にとって悩ましい、この「外字問題」を一気に解消しようというプロジェクトが始まった。パソコンで文章を書くときの使い勝手は大きく変わるのか――。 例えば「渡辺」の「辺」。ＪＩＳ規格には「邊」「邉」をあわせた３文字しか含まれないが、１００字近い異体字があるとされる。 約５８万人分の戸籍を扱う東京都足立区。区役所のパソコン画面には４９もの「辺」の異体字が現れた。戸籍などを管理するコンピューターシステムに区が登録したものだ。名前に未登録の漢字がある住民が転入するたびに増え、今では外字全体で約５千もある。 外字を作るのは区職員。パソコンで、１文字に３０分ほどかけて点描する。完成後は庁内や出先機関にある千数百台のパソコンに登
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
The Crazy Ones - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
UnicodeInHaskellSource – Haskell Prime
Stabilized Technical Report
Google Code Archive - Long-term storage for Google Code Project Hosting.