Auto-Scaling with Apache Helix and Apache YARN
At LinkedIn, many individual services integrate together to deliver a reliable and consistent end-user experience. Although each service handles a specialized set of responsibilities, they all share a common set of required features such as load-balancing, dynamic reconfiguration, health monitoring, and fault-detection. Last year we introduced Apache Helix, an open-source generic cluster managemen
管理が困難―分散処理の常識はZooKeeperで変わる
管理が困難―分散処理の常識はZooKeeperで変わる：ビッグデータ処理の常識をJavaで身につける（8）（1/3 ページ） Hadoopをはじめ、Java言語を使って構築されることが多い「ビッグデータ」処理のためのフレームワーク／ライブラリを紹介しながら、大量データを活用するための技術の常識を身に付けていく連載 分散処理の課題が「管理」なのは常識 複数の計算機上で動作（分散）するアプリケーション、ソフトウェアが多く存在します。分散ソフトウェアは複数の計算機で動作することで大量のデータを扱えたり、高負荷な状況に対処します。本稿では、複数の計算機（クラスタ）で動作する各サーバを「インスタンス」と呼びます。 本連載で紹介した分散Key-Valueデータベースである「HBase」は複数の計算機で動作する代表的なソフトウェアです。両ソフトウェアはともに「Apache ZooKeeper」（以下、Z
Replication, atomicity and order in distributed systems
Replication, atomicity and order in distributed systems Distributed systems are an increasingly important topic in Computer Science. The difficulty and immediate applicability of this topic is what makes distributed systems rewarding to study and build. The goal of this post (and future posts on this topic) is to help the reader develop a basic toolkit they could use to reason about distributed sy
IPDPS - IEEE International Parallel & Distributed Processing Symposium
CALL FOR PARTICIPATION 39th IEEE International Parallel & Distributed Processing Symposium June 3-7, 2025 Politecnico di Milano Milan, Italy IPDPS 2025 to be held in Milan, Italy Sponsored by the IEEE Computer Society Technical Community on Parallel Processing, IPDPS is an international forum for engineers and scientists from around the world to present their latest research findings in all aspect
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Distributed systems theory for the distributed systems engineer | Paper Trail
dblp: International Conference on Distributed Computing Systems (ICDCS)
