Delivering eBay's CI Solution with Apache Mesos - Part I
Problem statement In eBay’s existing CI model, each developer gets a personal CI/Jenkins Master instance. This Jenkins instance runs within a dedicated VM, and over time the result has been VM sprawl and poor resource utilization. We started looking at solutions to maximize our resource utilization and reduce the VM footprint while still preserving the individual CI instance model. After much deli
第1回 DCOSを使ってみよう | gihyo.jp
DCOS GA開始 2015年6月10日、米国Mesosphere社がかねてより開発を行っていたDCOS（Data Center Operating System）が晴れてGA（General Available, 一般向け利用の開始）となりました。弊社は以前よりMesosphere社と密接な関係を持っており、DCOSについてもその評価を進めてきましたが、GAとなったことを受けて、改めてDCOSについてご紹介したいと思います。 DCOSとは何か、DCOSで何ができるのか？ Mesosphere社はデータセンター全体をあたかも1つのオペレーティングシステムでコントロールする仕組みがDCOSであると言っています。とはいうものの、皆様の中には普段から自社の内製ツールやソフトウェアでデータセンターを運営していたり、OpenStackのような複数のホストを制御して一体のサービスとしてユーザに提供して
「Mesosphere Datacenter OS（DCOS）」が正式版に。クラスタを簡単に拡張、縮小。ワンクリックでクラスタへのアプリ展開も
Mesosphereは同社が開発してきたクラスタ管理ソフトウェア「Mesosphere Datacenter Operating System」（Mesosphere DCOS）が正式版としてリリースされたことを発表しました。 MesosphereはデータセンターをまるでノートPCのように簡単に扱えるようにすることを目標にデータセンター向けソフトウェアを開発してきた企業です。 Mesosphere DCOSは、オープンソースとして開発されている「Apache Mesos」を中心に、使いやすいコマンドラインインターフェイスとWebインターフェイス、タスクを管理する関連ソフトウェアのMarathonやChronosなどを統合したもの。アップルはApache Mesosを自社のデータセンターに採用し、Siriのバックエンドを運営していることが最近話題になりました。 Mesosphere DCOS
KubernetesとMesos：Dockerのスケジューリングツールの違いを理解する
注目されるDockerのスケジューリングツール Dockerには、基本機能だけでは自分自身がインストールされているホストのコンテナしか管理できず、複数ホストのコンテナを管理できないという問題がある。そのため、実際にサーバを複数台利用するような規模でDocker環境を運用することを考えると、コンテナのクラスタリングやスケジューリングなど、複数ホストにまたがってコンテナをオーケストレーションする仕組みが必須となる。 そのため、Docker環境の管理を行うスケジューリングツールが注目を集め、数多くの製品が登場しているが、その中で特に注目されているものに、KubernetesとMesosがある。KubernetesとMesosは、複数ホストのコンテナを簡単に管理できるという点では共通しているが、機能の対象範囲には違いがある。 今回は、KubernetesとMesosの特徴と相違点について整理し、そ
Deploy a Mesos Cluster with 7 Commands Using Docker
This tutorial will show you how to bring up a single node Mesos cluster all provisioned out using Docker containers (a future post will show how to easily scale this out to multi nodes or see the update on the bottom). This means that you can startup an entire cluster with 7 commands! Nothing to install except for starting out with a working Docker server. This will startup 4 containers: ZooKeeper
MesosとCephのクラスタをAWSに構築するTerraformのmoduleを書いた - As a Futurist...
冬休みの宿題として、Mesos+Docker でアプリちゃんと動かしたい！→Shared Filesystem が欲しい →Ceph やりたい！→AWS の orchestration が必要 →Terraform 面白い！という yak shaving を経て、なぜかずっと Terraform をいじってました。とりあえずちゃんと動くのができたので公開。 riywo/mesos-ceph Terraform module for Mesos + Ceph cluster and Packer template – As a SW/Ops/DB Engineer 細かい話は 1 年ぶりの英語で適当に書きなぐったつもりなので、こちらにはポエムでも。 Terraform 面白い このブログとかを移行しようと考えてて、AWS を遊びじゃなくて運用しようとしたら、VPC とかサーバ以外に管理しなき
Cronの置き換え『Chronos』を試してみる - tsunokawaのはてなダイアリー
やりたいこと 物理、仮想含め数百台のサーバーを管理しているので、 cronを一括管理したい cronジョブの負荷を分散したい cronの結果を可視化(成功or失敗) Dockerコンテナのcronを外出ししたい Dockerコンテナが作成または削除される度にcron登録・削除をAPIで行いたい これらを実現したいと思っていました。 そこで『Chronos』です！ 結論から言うとChronosを使ってこれらを実現することができました。 Chronosとは そこでChronosって何？という話しになりますが、 Cronの置き換えを想定したジョブスケジューラです。 airbnb/chronos · GitHub Mesos上で動くので登録されたジョブをいい感じに分散して実行してくれます。 図にするとこのような感じだと思います。 検証環境 本エントリで例としてIPアドレスやmesos-master
Apache Mesos
Program against your datacenter like it’s a single pool of resources Apache Mesos abstracts CPU, memory, storage, and other compute resources away from machines (physical or virtual), enabling fault-tolerant and elastic distributed systems to easily be built and run effectively. Download Mesos Mesos 1.11.0 Changelog What is Mesos? A distributed systems kernel Mesos is built using the same principl
Chronos by airbnb
Fault tolerant job scheduler that handles dependencies and iso8601 based schedules. View the Project on GitHub airbnb/chronos Download ZIP File Download TAR Ball View On GitHub Chronos is airbnb's replacement for cron. It is a distributed and fault-tolerant scheduler which runs on top of mesos. It's a framework and supports custom mesos executors as well as the default command executor. Thus by de
Setting up an Apache Aurora/Mesos Cluster with Vagrant
Wednesday, 15 January 2014 Over the past 1.5 years, I’ve been given the unbelievable fortune to work with some of the most awesome people I’ve ever worked with in my life. My work at twitter.com has taken me from working with a few hundred machines at a time at my last job, to thousands. In order to have all these machines work together, you need to have some kind of cluster management system. Wit
Docker + Mesos + Marathon + Graphite + Fluentd + Sensuを組み合わせたデプロイ管理ツールの話 - ゆううきブログ
開発合宿でDevOps界隈やモニタリング界隈で流行りのツールを組み合わせてBlue Green Deploymentできる何かを作りました。 同じチームで開発したid:shiba_yu36 先生やid:wtatsuru 先生が既にブログを書いてますが、自分の視点で書いてみます。（13/12/24追記: より詳細な内容が新規に書かれたのでリンク先を入れ替えました） Docker, Mesos, Sensu等を利用したBlue-Green Deploymentの仕組み - $shibayu36->blog; Docker コンテナにアプリケーションを立てて Graphite でいい感じに可視化するまで - wtatsuru's blog 僕は主に、各ツールから得られる情報をまとめて管理し、デプロイを実行するデプロイ管理ツールを作成していましたので、それについて書きます。 普段は運用の修行をして
開発合宿でDockerとMesosを使っていい感じにリソース提供とデプロイするやつを作ってた - wtatsuruの技術方面のブログ
3日間の開発合宿で、Docker と Mesos を使ってリソース管理からテスト・デプロイ管理までするやつのプロトタイプを作ってた。 4人チームで3日間みっちりやって、それなりにいい感じにはできたと思う。id:shiba_yu36 が既に書いてるけど、自分の視点から感想だけ書いておく。 本番環境のBlue-Green Deploymentの仕組みのプロトタイプを作っていた - $shibayu36->blog; 経緯 最近忙しくてあまり触れてない、Immutable Infrastracture みたいなのを作ってみたかった。 Docker を開発に使うのはいい感じだけど、実際の運用に組み込むには、というイメージをつかみたかった。 というのをラーメン屋で話してたら4人集まったので風呂敷を広げてみた。 どんなものを作ったか アプリケーションは Docker コンテナとして動かす。 Debia
Apache Mesos vs Kubernetes vs Docker | D2iQ | D2iQ
We’ve evaluated D2iQ against other platforms, so you can choose the best Kubernetes solution to meet your enterprise requirements.
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
TechCrunch | Startup and Technology News
GitHub - ahunnargikar/vagrant-mesos: Mesos/Docker/Marathon/Aurora development Vagrant Virtualbox setup
Getting Started with Apache Mesos and Apache Aurora Using Vagrant - DZone Big Data