タグ

kinesisに関するmakky55makky55のブックマーク (3)

  • AWS FireLensってなんだ? - Qiita

    What's? AWS FireLensについて、知っておきたかったので軽く調べてみました、と。 AWS FireLensとは? AWS FireLensとは、2019年9月に発表された、Amazon ECSで使用できるログルーターのことです。 Firelens の発表 – コンテナログの新たな管理方法 タスク定義の中に含めてサイドカーとして配置しつつ、他のコンテナからはログドライバーとして使用します。 カスタムログルーティング AWS FireLensからは、Amazon CloudWatch LogsまたはAmazon Kinesis Data Streams、Amazon Kinesis Data Firehose、そして別のFluentdやFluent Bitに転送することができます。 以下のタスク定義サンプルは、Firelens の発表 – コンテナログの新たな管理方法からの抜粋

    AWS FireLensってなんだ? - Qiita
  • AWSでストリームデータを扱うためのメッセージングサービス - Qiita

    著者: 伊藤 雅博, 株式会社日立製作所 はじめに AWSでストリーム処理を実現する際は、データをキューイングするメッセージングサービスと、キューイングしたデータをストリーム処理するサービスを組み合わせることが一般的です。投稿では、AWSが提供する各メッセージングサービスの概要と、ストリームデータを扱う際の選択基準を紹介します。 なお、投稿の内容は2020年中頃の調査結果をベースに、いくつか更新を加えたものです。AWSのサービス仕様は随時更新されるため、最新の仕様とは異なる場合があります。最新の情報はAWSの公式ドキュメントをご参照ください。 投稿一覧: 1. AWSでストリームデータを扱うためのメッセージングサービス (投稿) 2. AWSのストリーム処理向けメッセージングサービスKDS(Kinesis)・MSK(Kafka)・SQSの特徴 3. AWSのKinesis Data

    AWSでストリームデータを扱うためのメッセージングサービス - Qiita
  • Kinesis Data Stream を使ってみる - 欲望のおもむくままに

    多数の記事が上がっている Kinesis Data Stream を使ってみます。 今回は、IoTで受信したデータを Kinesis Stream に投入します。 まずは、IoT に Kinesis Stream にデータ連携するルールを作成します。 ルール名、トピック、抽出する属性を指定します。 アクションの追加で、「Amazon Kinesis Stream にデータを送信する」を選択します。 「新しいリソースを作成する」で、Kinesis Stream を作成します。 名称、シャード数を設定します。 シャードとは、Stream のデータをグループ化する単位のイメージです。 シャードを分割すると、Stream のデータを並列に処理することができます。 作成したStream、パーティションキー、ロールを設定します。 ロールは、「新しいロールの作成」で作成しました。 そのまま、IoTアクシ

  • 1