Multitenancy: Kafka clusters for everyone at LINE

Yuto Kawamura from LINE Corporation presented on their use of Apache Kafka clusters to provide multitenancy for different internal teams. They face challenges in ensuring isolation between client workloads and preventing abusive clients. Their solutions include request quotas to limit client resource usage, slow logs to identify slow requests, and changes to the broker code to pre-warm caches and

[HHR]

quota

[kimutansk]

Cache上にない場合のブロックをHandler側に移し、LatestでないSegmentのみ実行することで他の即対応可能なリクエストに影響を出さないようにすることでマルチテナンシと同等、という状態に持って行ったわけですか。

[seikoudoku2000]

この発表凄かった。