タグ

AWSとbatchに関するwlbhiroのブックマーク (2)

  • 【新サービス】AWS BatchがGA(一般利用開始)になったので使ってみた | DevelopersIO

    こんにちは、せーのです。今日は日よりGAになった新サービス「AWS Batch」を使ってみたいと思います。 AWS Batch クラウド上で特定のバッチ処理を流したい場合、最初に考えるのはEC2を立ち上げてバッチを書いてcronあたりにセットする方法でしょう。もう少しAWSに詳しくなるとLambdaを使ってサーバレスにバッチを流すことを考えるかもしれません。ただLambdaでは処理時間5分を超えるような大規模なバッチは流せません。いくつかのバッチをフローとして次々流すのであればSWF(Amazon Simple Workflow)というサービスもあったりするのですが、こちらはとにかく仕組みを覚えるのが大変です(経験者談)。どのサービスも一長一短、ちょうどいい感じのものはないものか、という要望に答えるのがこの「AWS Batch」となります。 AWS BatchとはAWSフルマネージドなB

    【新サービス】AWS BatchがGA(一般利用開始)になったので使ってみた | DevelopersIO
  • ストリーミングデータとは - ストリーミングデータの説明 - AWS

    ストリーミングデータは、低レイテンシー処理を目的とした継続する増分的な方法で大量に送信されるデータです。組織には、一般に数バイトから数メガバイト (MB) におよぶさまざまなサイズのメッセージ、レコード、またはデータを同時に送信する、何千ものデータソースがあります。ストリーミングデータには、企業がリアルタイムの分析と、そのビジネスのあらゆる側面に対する可視性のために使用する、ロケーション、イベント、およびセンサーデータが含まれています。例えば、企業は、クリックストリームとソーシャルメディアストリームからのお客様の投稿を継続的に分析し、必要に応じてすみやかに対応することによって、そのブランドと製品に関する世論の変化を追跡できます。 データストリームには、それを定義する次のような固有の性質があります。 時系列的な意義 データストリーム内の個々の要素にはタイムスタンプが含まれています。データスト

    ストリーミングデータとは - ストリーミングデータの説明 - AWS
  • 1