デシリアライズ速度の比較 ByteBuffer vs DirectBuffer vs Unsafe vs C - Blog by Sadayuki Furuhashi

OpenJDK や Hotspot VM には sun.misc.Unsafe という内部APIがあり*1、これを使うと ByteBuffer.getInt や ByteBuffer.getLong よりも高速にバイト列から整数値をデコードできるという。これを駆使することで、Cで実装された拡張ライブラリに匹敵する速度を出せるらしい。 それが本当なら、データ圧縮やハッシュ関数、シリアライザ/デシリアライザなどの実装を高速化できる。例えば、lz4 や xxhash のJava実装が Unsafe API を使用している*2：jpountz/lz4-java Prestoも、中間データのシリアライズ/デシリアライズにはすべて Unsafe API を使っている*3。 そこで、実際にベンチマークしてみた。 ベンチマーク内容 10MBのランダムなバイト列を生成する 先頭から1バイト読み出す その1バ

[msykt]

Unsafe heapが大分速いですね。ByteBuffer directがByteBuffer heapに対してここまでアドバンテージがあるのも知らなった

[Dryad]

これのために実行環境に制約をつけるかどうかは結構微妙な気がする。CPUボトルネックな処理なら良さそうだけど。

[cco]

sun.misc.Unsafe 事例

[kimutansk]

sun.misc.Unsafe パッケージ配下のAPIだとここまで性能変わってきますか。

[horimislime]

へぇー

[yass]

"sun.misc.Unsafe という内部APIがあり、ByteBuffer.getInt や ByteBuffer.getLong よりも高速にバイト列から整数値をデコードできるという。これを駆使することで、Cで実装された拡張ライブラリに匹敵する速度を出せるらしい"

[dann]

Unsafe