subtech - Bulknews::Subtech - Fix dodgy utf-8 bytes

はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28

[lesamoureuses]

＞方針としては 127-255 なlatin-1レンジの文字列のutf-8 bytes表現をつくり ($re_bit)、受け取った文字列にマッチさせ、utf-8 としてデコードしてコードポイントにして latin-1 にエンコードする

[bluespear]

"すでに utf-8 なバイト列を latin-1 と解釈して utf-8 に二重エンコードすることで起きる文字化けを直すコード。" "CPAN Encode::DoubleEncodedUTF8"

[webmarksjp]

perl

[ma2]

二重にutf-8でエンコードしてしまったバイト列を元に戻す。面白い。

[hassylin]

encodeでの２重エンコード文字化けをfix CPAN Encode::DoubleEncodedUTF8

[river2470]

文字化け対策

[tsupo]

「すでに utf-8 なバイト列を latin-1 と解釈して utf-8 に二重エンコードすることで起きる文字化け」、TypePad(というかココログ)でサービス開始当初から頻繁に起きてるので、早いとこ直して欲しかったり

[charsbar]

doubly (ないしdouble) encoded utf-8？(see http://www.nabble.com/RE:-Unicode-conference-papers-t2678159.html って、miyagawaさんなら既知か) 日本語のいいのは知らないですね

[kdaiba]

ラテン1でいいんだ

[vkgtaro]

二重に utf-8 エンコードしちゃった文字化け直し

[kaz_goto]

文字化け直し