CPU シミュレータを用いて継続的ベンチマークを安定化させる - mizdra's blog

id:mizdra は eslint-interactive というツールをメンテナンスしています。このツールを使うと、多数の ESLint エラーを効率的に修正できます (詳しくは以前書いた記事を見てください)。 www.mizdra.net eslint-interactive では「中規模〜大規模なコードベースであってもキビキビ動く」を大事にしてます。その一環として、eslint-interactive には CI (GitHub Actions) でベンチマークを取り、以前から大きく劣化していたら CI を fail させる仕組みがあります。 https://github.com/mizdra/eslint-interactive/actions/workflows/benchmark.yml?query=is%3Afailure しかし CI で実行するためにノイズが大きく、よく

[syque]

“実行時間はブレやすい一方、実行された CPU 命令の数はブレにくい よって壁時計時間や CPU 時間よりも一貫性のあるメトリクスが得られる”

[vcc]

ノイズがある環境で安定的にベンチマークを取るにはCPU 命令数とCPU キャッシュヒット率を見れば良い

[side_tana]

カッコ良い

[psne]

※修正済み シミュレーターは趣味じゃない

[beginnerchang]

趣味レータ警察だ！