タグ

ブックマーク / sekikn.github.io (1)

  • Apache Bigtop の概要と最新動向

    記事は, Distributed computing (Apache Spark, Hadoop, Kafka, …) Advent Calendar 2020 18日目の記事です。 この記事では, Apache Bigtop (以下 Bigtop) という OSS プロジェクトの概要と、 2020年12月時点の最新動向について紹介します。 Bigtop の概要と歴史 Bigtop は, Apache Hadoop エコシステムの環境構築やテストを容易にするための Apache Software Foundation 傘下のプロジェクトで、以下のような機能を提供します。 Hadoop や Spark などのビッグデータ関連 OSS を, deb や rpm 形式にビルドしたバイナリパッケージ。 パッケージのインストールとその後の環境設定 (以下、併せてデプロイと呼びます) を自動化するた

    sh19910711
    sh19910711 2022/12/21
    2020 / "Apache Bigtop: 2011年に Apache incubator 傘下のプロジェクトとして活動を開始 + 2012 年に TLP に昇格 / EMR では、2015年にリリースされた バージョン 4.0 から、インストールされるパッケージのビルドに Bigtop を利用しており"
  • 1