JavaのString生成方法がボトルネックになっていた話 - WAF Tech Blog ｜ クラウド型 WAFサービス Scutum

はじめに 先日、私たちが開発しているクラウド型WAFサービス、Scutum(スキュータム)において、予想していなかった箇所の修正によってサーバの負荷が大幅に減るということがありました。原因はこのエントリのタイトルにもあるように、Stringクラスのインスタンスを生成する際の方法にありました。 Stringクラスのコンストラクタとcharset Stringクラスにはいくつかのコンストラクタが用意されています。我々が使っていたのはString(byte[] bytes, String charsetName)です。2つめの引数で、"MS932"や"UTF-8"のような文字集合(以下charset)を明示的に指定するものです。 ScutumのようなWAF(Web Application Firewall)は通常のウェブアプリケーションとは異なり、起動している間にさまざまなcharsetを扱うこ

[matsuza]

StandardCharsetsを使うのじゃ。

[t-murachi]

Java に限らず、ロケールを扱うオブジェクトって、結構高コストだったりするんですよね。構文糖衣で上手くやったつもりが…みたいなことはまあまあありそう。

[tamtam3]

この手の知識がない人が後でメンテナンスすると『変なコーティングしやがって』と戻される可能性が…

[umaemong]

知らなかったー。Charset型の引数を取るメソッドはUnsupportedEncodingExceptionのcatchが不要なので便利だわって使ってたけど、Charset探すのがそんなにコストの高い処理だとは知らなかった。

[wordi]

jstackを利用したチューニングについて。スタックトレースを出力して高コストを探る。

[sonots]

おぉ

[y_uuki]

まじか

[blueribbon]

「異なるcharsetが3つ以上混在してしまっている場合、キャッシュは効きません。JavaランタイムはCharsetを探す処理をはじめからやり直してしまいます。」 対策：自分でCharsetクラスのインスタンスをキャッシュする。

[W53SA]

文字列処理、奥が深い

[stealthinu]

charsetを複数切り替えて使うような特殊なアプリだとcharsetのキャッシュが効かなくてStringのコンストラクタにすんごい負荷がかかってた、という話。これはなかなか気がつけんわな。

[yumu19]

へー。

[kfujieda]

charsetを文字列で指定するコンストラクタの濫用がボトルネックになる。

[zetamatta]

mjdsk > 3つ以上のcharsetを使い回すような用途は、Javaは想定していません

[ka-ka_xyz]

手元でforループ内でString作ってざっくり確認したけど、確かに文字コード3種類使うと2種類と較べて倍ぐらい時間かかるな。StandardCharsets使えば手っ取り早いけどMS932使えないのがなー。

[monamour555]

これは盲点… /// JavaのString生成方法がボトルネックになっていた話

[shikiarai]

//何故か分かりませんが、以下の処理をなくすと急に重くなります。消さないでください。

[ipa5963]

分かりやすく残してくれるのはとてもありがたい。

[teracy_junk]

『Javaは、基本的には1つのプロセス（アプリケーション）が、このように複数のcharsetを使っていくことを主として想定していません』

[kwms]

"独自のcharsetを追加するかどうかに関わらず、3つ以上のcharsetを使い回すような用途は、Javaは想定していません"

[kimutansk]

1つのJVM上でCharsetを3つ以上使用することをJavaは想定しておらず、実行した場合極端に性能が落ちると。特定用途のアプリだとかなりやらかしそうな・・

[tpircs]

面白かったけど自分の世界では必要になら無そうな知識だった。

[megascus]

面白い。UTF-8で統一することにしよう。

[acealpha]

何度も文字バイト対応表を引っ張ってくるコストが無視できなくなるってことと理解した 二つまではキャッシュしてる意味はようわからんな 文字コード変換用途かな

[bufferings]

面白いなぁ。

[gayou]

難しい。。複数のCharsetを扱うプログラムを書いたことないなぁ。。

[Sediment]

へー面白いな

[takaboujp1122]

いつか困った時見るかも

[dann]

> Charsetインスタスをキャッシュ

[takc923]

String生成方法変えるだけでLAが半分に

[ymori76]

ん～・・・関係あるかどうか一応見ておくか。