タグ

qiitaとhadoopに関するpero_0104のブックマーク (2)

  • Hadoopとは - Qiita

    Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? Hadoopに関する基的な内容をまとめてみたものです。Hadoopに関する、Web上にすでにある解説コンテンツをまとめたサイトの抜粋です。 [Hadoopとは] (https://www.techcrowd.jp/bigdata/hadoop/) [Hadoopの概要] (https://www.techcrowd.jp/bigdata/hadoop/) Hadoopは、 ・テキスト ・画像 ・ログ などの構造化されていないデータを、高速に処理出来るオープンソースのプラットフォームです。 Hadoopは大規模なデータの処理に適している

    Hadoopとは - Qiita
  • cronの代替になりそうなジョブ管理ツールのまとめ - Qiita

    たまに検討するけど、よく忘れるのでまとめておく。ごく個人的な感想としては、Rundeck, Azkabanあたりで始めてみるのがいいかもと思う。 要件 重複実行の防止 ジョブの実行結果、かかった時間、ログ出力などが見れる 失敗時の通知 候補 OSS系 Rundeck http://rundeck.org/ Java Runtimeで動く RUNDECK PROという有料サービスもある http://simplifyops.com/ 参考: http://heartbeats.jp/hbblog/2015/01/rundeck.html Oozie http://oozie.apache.org/ Workflow Scheduler for Hadoop Java http://oozie.apache.org/docs/4.1.0/DG_Overview.html Webコンソールもある

    cronの代替になりそうなジョブ管理ツールのまとめ - Qiita
  • 1