OSSのジョブ管理システム Kuroko2を使ってみた | DevelopersIO
私の所属するプロジェクトで、OSSのジョブ管理ツールKuroko2を導入しました。 簡単にKuroko2の特徴、設定手順をご紹介します。 導入の経緯 プロジェクトが始まった時、一定間隔で起動する小さなジョブが一つか二つあるだけなのでcronで動かしていました。 ですが、リリースから時間が経ちサービスが成長するにつれ次第にジョブも増えていきました。 「こっちのDBから1日1回データを同期して画面に反映して欲しいです！」 「FTP接続してこっちのファイル取得してほしいんだけど...」 「対象のデータがあったらS3にJSON書き出してくれない？」 その場しのぎで次々にcron起動のジョブを増やしていったところ、ある日 崩壊した... (青：使用可能メモリ、緑：使用済みメモリ) ジョブ管理システム Kuroko2の導入 自前でジョブ管理システムを構築することも検討しましたが、時間がないことやすでに
[CentOS6] SOS JobScheduler
「SOS JobScheduler」は、オープンソースのジョブ管理ツールです。ドイツの企業である「Software-und Organisations-Service GmbH (※略称：SOS GmbH)」が開発を行なっています。 Linux/Windows版はGPLのもと、無償で公開されているようですが、HP-UX/Solaris/AIX 版は、有償のようです。 ドイツ語版と英語版があります。英語のドキュメントが用意されているので、英語が得意でない私でも何とか使えました。 非常に優れたジョブ管理ツールだと思います。 私が使い始めた2013年02月 時点では、日本語対応していませんでしたが、2014年10月時点では、JOCとJOEが、日本語表示できるようになりました。 ただし、ジョブの標準出力に日本語を使用すると、JOCのログ表示画面で文字化けしたりするので、完全に日本語対応しているわけ
![[CentOS6] SOS JobScheduler](https://cdn-ak-scissors.b.st-hatena.com/image/square/ba081406a3cd8d5571579cdd4daad210c0693634/height=288;version=1;width=512/https%3A%2F%2Fblogger.googleusercontent.com%2Fimg%2Fb%2FR29vZ2xl%2FAVvXsEge3DtPiVL8NsaeQbH4oP8Qv9Y23IQ2-XHNcYd-btt3CTjaAOfs2invhDWkkV1EXac4ht9v0AcgEvWzSCPpJyrfw14kW4GqSSwvmefCrUb5lGx0ATBKv9DEwZfO1Sz7KQp5gysm4uBbtue5%2Fw1200-h630-p-k-no-nu%2Fsosjob000_01.gif)
[JobScheduler] JobSchedulerインストール手順 - Life with IT
2014/05/04更新 対応バージョン: 1.6.4119 公式サイト Software Open Source - JobScheduler システム構成 JobSchedulerにはサーバ1台によるスタンドアローン環境から大規模なクラスタ環境まで様々な構成がとれるが、ここではシンプルにスタンドアローン環境を構築する。 準備 あらかじめインストールしておくもの MySQL (他のDBMSも利用可能。サポートするDBMSは公式サイトを参照) JDBCドライバ(MySQLの場合はlibmysql-java) Java実行環境 導入OS Ubuntu 13.04 MySQL事前準備 まずMySQLの準備を行う。 最初にサーバの文字コードをUTF-8に変更する。my.cnfの[client]、[mysqld]それぞれのセクションに以下の行を追加してサーバを再起動する(すでに設定されていればこの
![[JobScheduler] JobSchedulerインストール手順 - Life with IT](https://cdn-ak-scissors.b.st-hatena.com/image/square/63c67004f340a9cfebe1346d512a10a786385cbc/height=288;version=1;width=512/https%3A%2F%2Fl-w-i.net%2Fimg%2Flogo_256.png)
初めての運用管理者が知っておきたい監視・ジョブ管理向けOSS構成例4つの比較まとめ
初めての運用管理者が知っておきたい監視・ジョブ管理向けOSS構成例4つの比較まとめ：Zabbix＋JobSchedulerで効果的な運用監視とジョブ管理（1/2 ページ） 「監視」と「ジョブ管理」はシステム運用の要といえるもの。オープンソース、商用ともに多様なツールが存在しますが、本連載ではオープンソースソフトウエア（以降、OSS）に焦点を当て、「Zabbix」と「JobScheduler」の活用法を詳しく解説します。監視やジョブ管理の機能を持つツールは種々存在しますが、その中でも特にオープンソースソフトウエア（以降、OSS）のZabbixとJobSchedulerを活用する方法について解説します。 前編となる本稿では、監視とジョブ管理の正しい在り方と、ZabbixやJobSchedulerを用いることによるメリット、TISが開発したOSSであるZabbixとJobScheduler連携ツ
TIS、ZabbixとJobSchedulerの連携ツール「HyClops JobMonitoring」をオープンソースで公開
TISは、オープンソースの統合監視ツール「Zabbix」と、パッチジョブ管理ツール「JobScheduler」を連携させるツールとして、「HyClops JobMonitoring」を2月10日にオープンソースソフトウェアで公開した。あわせて、「JobScheduler」の保守サポートサービスの提供を開始する。 「HyClops JobMonitoring」は、「JobScheduler」で実行したジョブの状態を「Zabbix」で監視する機能や、ジョブの実行負荷状況にあわせて適切に「Zabbix」の監視閾値の設定を変更する機能を備えている。 「JobScheduler」の保守サポートサービスは、独自の技術検証や調査をもとに、適切なオープンソースソフトウェアの活用方法を提案し、エンタープライズシステムの安定稼働を実現する「TISエンタープライズOSSサポート」の一環として提供する。 【関連リ
Zabbixとjob scheduler連携による運用システムoss化の実現
This document discusses Zabbix, an open source monitoring software, and its job scheduling capabilities using HyClops. It also talks about TIS's support for open source software and monitoring infrastructure using Zabbix. The presentation provides an overview of Zabbix's features for monitoring servers, networks, databases and applications using agents. It also describes how Zabbix uses APIs to in
これからの運用自動化にJobSchedulerを活用する～基礎編2
これからの運用自動化にJobSchedulerを活用する～基礎編2：OSS「JobScheduler」で実現するこれからの運用自動化（2）（1/2 ページ） 2回は引き続きJobSchedulerの機能について解説した上で、基本機能を用いて、複数サーバにまたがって順序性を持たせたジョブを制御する方法を紹介します。 連載第1回「JobSchedulerの機能と設定～基礎編」では、JobSchedulerの特徴やアーキテクチャ、活用場面が多いであろう機能について解説しました。第2回は引き続きJobSchedulerの機能について解説した上で、基本機能を用いた実際の活用例について紹介します。 運用自動化を実現するJobSchedulerの機能 APIを使ったJobSchedulerの操作 APIには、ジョブ内からJobSchedulerを操作するために用意されている「内部API」と外部連携のため
JobSchedulerの機能と設定～基礎編
JobSchedulerの機能と設定～基礎編：OSS「JobScheduler」で実現するこれからの運用自動化（1）（1/2 ページ） 本連載では運用管理の一要素である「バッチジョブ管理」に着目し、より効率よいバッチジョブ管理を実現するためのツールであるオープンソースの「JobScheduler」について解説します。 はじめに サーバ仮想化やクラウドの浸透により、システム環境はますます複雑化しています。このような中、近年ではDevOpsに代表されるとおり、迅速にサービス提供を実施するために効率よい開発や運用を実施することが求められています。 本連載では運用管理の一要素である「バッチジョブ管理」に着目し、効率よいバッチジョブ管理を実現するためのツールであるオープンソースのソフトウェア「JobScheduler」について解説します。 ※以降、本編の中で記載する「ジョブ」は「バッチ形式で実行する
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
JobScheduler設定 - gouyasystem