compactionの検索結果1 - 4 件 / 4件

• あとで読む

  Kafka Brokerのcompaction動作の詳細とチューニング方法について - Repro Tech Blog

  • 34 users
  • tech.repro.io
  • テクノロジー
  • 2022/06/21

  Reproでチーフアーキテクトとして働いているid:joker1007です。 今回、Kafka Brokerのcompaction動作について調査しチューニングすることでパフォーマンス改善の成果が得られたため、そのノウハウをブログにまとめておきました。 かなりマニアックな内容なので、需要は多くないと思いますが、私が調査した限りでは日本語で同じ様な内容のブログ記事はほとんど存在しなかったため、Kafkaを自前で運用している人にとっては役に立つ内容かもしれません。 compactionとは (参考: https://kafka.apache.org/documentation/#compaction) Kafkaの基本的なデータ削除ポリシーは一定時間が経過したら過去のデータをそのまま削除するdeleteというポリシーを使う。 これは、log.retention.hoursという設定でコントロー

  • kafka
  • performance
  • あとで読む
  • データ

  
• あとで読む

  メモリのデフラグはどうやって動いてる？　Linux Kernelの「Compaction」にみる断片化解消の仕組み

  • 24 users
  • logmi.jp
  • テクノロジー
  • 2021/07/07

  Kernel/VM探検隊はカーネルや仮想マシンなどを代表とした、低レイヤーな話題でワイワイ盛り上がるマニアックな勉強会です。齊加氏は、Linux KernelコードからCompaction機能の仕組みや工夫点を調査した結果について発表しました。 メモリの虫食い状態を緩和するデフラグメンテーション 齊加匠氏：「Deep Dive into the Linux Kernel　メモリ管理におけるCompaction機能について」というタイトルで株式会社エヌ・ティ・ティ・データの齋加が発表します。 自己紹介です。所属は株式会社エヌ・ティ・ティ・データで、業務はアプリケーション開発です。OSは関係ないんですが、アプリケーション開発をしていて、主にSpringを使っています。好きなものはGolangやArch Linuxです。かねてよりメモリ管理に興味があって、Linux Kernelのメモリ管理につ

  • kernel
  • linux
  • カーネル
  • メモリ
  • memory
  • コード
  • あとで読む
  • tech

  
• あとで読む

  Ruby Garbage Collection Deep Dive: Compaction

  • 16 users
  • jemma.dev
  • テクノロジー
  • 2021/05/09

  So far in this series, we’ve discussed GC::INTERNAL_CONSTANTS, the Tri-Color Mark and Sweep algorithm, Generational GC and Incremental GC. We’ll build on what we’ve learned in this post about the newest addition to Ruby’s GC: compaction. Fragmentation Before we dive into compaction, we need to learn about fragmentation. Fragmentation is the term we use to describe memory when it’s allocated non-co

  • GC
  • ruby
  • アルゴリズム
  • あとで読む
  • HotEntry
  • it
• あとで読む

  「Ruby 2.7.0」が正式リリース ～パターンマッチングを実験的に導入／REPL環境の改善や「Compaction GC」の実装なども

  • 7 users
  • forest.watch.impress.co.jp
  • テクノロジー
  • 2019/12/26

  • ruby
  • software