タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

asakusaに関するkaghanのブックマーク (3)

  • ノーチラス、原価計算の基幹バッチ処理を「Asakusa Framework」で12分の1に短縮

    ノーチラスは、アンデルセンサービスのシステム構築において、アマゾンウェブサービス(AWS)のクラウドサービスを利用することにより、インフラ構築の時間を大幅に短縮、初期コストも低減し、Hadoopのクラスタを早期に準備することができたという。また、AWSの従量課金体系により、オンプレミス想定構築運用費用と比較し、約10分の1に運用コストを低減することができたとしている。さらに、「Amazon Virtual Private Cloud (Amazon VPC)」を活用することにより、クラウド上に重要なデータを送信することに対する不安を払拭したという。 発表によると、システムを構築するにあたり、AWSが提供しているクラウドサービスのうち、AWSが東京リージョンで提供している「Amazon Elastic Compute Cloud 」「Amazon Simple Storage Service

    ノーチラス、原価計算の基幹バッチ処理を「Asakusa Framework」で12分の1に短縮
  • Hadoopの本質は分散I/Oにあり~クラウド時代の非同期処理 - プログラマの思索

    Hadoop向け基幹バッチ分散処理ソフト「Asakusa」の記事がとても素晴らしいのでメモ。 【元ネタ】 第1回 分散処理を隠蔽し、大規模開発を可能に - Hadoop向け基幹バッチ分散処理ソフト「Asakusa」の全貌:ITpro 第3回 業務の境界や並列性を見極め処理を分割 - Hadoop向け基幹バッチ分散処理ソフト「Asakusa」の全貌:ITpro 基幹バッチ再構築のニーズは大きい、Hadoopの課題をAsakusaで解決する - インタビュー:ITpro Twitter / @akipii: Asakusa質は分散I/O。ディスクの入出力がバッチ処理のボトルネック。クラウド時代の非同期処理の設計技法は、ジョブフローからバッチ処理をDSLで自動生成することにあり。 CobolやPLSQLで書かれた古臭いバッチ処理は、全てHadoopで代用できないものか? Cobolの生産性の

    Hadoopの本質は分散I/Oにあり~クラウド時代の非同期処理 - プログラマの思索
  • 第1回 分散処理を隠蔽し、大規模開発を可能に

    筆者らは、オープンソースソフトウエアの分散処理ミドルウエア「Hadoop」を、基幹系のバッチ処理システムに適用するためのフレームワーク「Asakusa」を開発した。AsakusaはHadoopと同様に、オープンソースソフトウエアとして公開する。公開日は、連載の4回目をお届けする2011年3月31日の予定である。 Asakusaを使うことでHadoopによる分散処理のメリットを享受することが可能となり、これまでRDBMSを利用していた場合と比べて、多くのケースでバッチ処理システムの性能を大幅に向上することができる。筆者らが実際に構築を支援したシステムでは、それまで4時間かかっていた処理が数分で終わるようなケースも出てきている。 盛んに報道されているように、Hadoopはすでに多くの導入実績がある。ただしその用途は、ログ分析システムやレコメンデーションエンジンなどのビジネスインテリジェンス(

    第1回 分散処理を隠蔽し、大規模開発を可能に
  • 1