タグ

kinesisに関するsaihooooooooのブックマーク (3)

  • Amazon Kinesisのレコードにタイムスタンプ属性が追加されました | DevelopersIO

    ども、大瀧です。 昨日、Amazon Kinesisのアップデートがありレコードにタイムスタンプ属性が追加されました。 Amazon Kinesis Server-side Timestamp レコードのApproximateArrivalTimestamp属性にKinesisがレコードを受信したおおよその時刻がUNIXタイムスタンプの形式で含まれます。AWS CLIでGetRecordsをコールしてみました。 $ aws kinesis get-shard-iterator --stream-name OtakiTest --shard-id shardId-000000000000 --shard-iterator-type TRIM_HORIZON XXXXXXXXXX $ aws kinesis get-records --shard-iterator XXXXXXXXXX { "

    Amazon Kinesisのレコードにタイムスタンプ属性が追加されました | DevelopersIO
  • AWS Solutions Architect ブログ

    Amazon Kinesisシリーズ(2) Kinesis Client Libraryを使ってKinesis Applicationを作ってみよう パートナーソリューションアーキテクトの榎並です。 今回は、前回のBlogで紹介したAmazon Kinesis概要の中のKinesis Client Library(以下、KCL)について掘り下げたいと思います。 KCLは、Kinesis Applicationを開発するに辺り容易にデータ取得でき、かつ、耐障害性の高い仕組みを構築することができるライブラリです。Slideshareの資料にあるスライド24以降にKCLの機能をまとめましたのでご覧ください。 KCLは、Githubから取得できます。Amazon Kinesisの開発者ガイドにもKCLの実装方法などについて触れており、ブログはその情報に補足するものになります。 では、Amazon

  • RubyからAmazon Kinesisを操作する - Tech-Sketch

    昨年11月、米ラスベガスで開催されたカンファレンス「AWS re:Invent 2013」で、ストリーミングデータをリアルタイムに処理するサービスである「Amazon Kinesis」が発表されました。ストリーミングデータをリアルタイムに処理...と、なにやら難しそうな感じがしますが、API、SDKが公開されているので簡単に試すことができます。今回はRuby向けAWS SDKを利用し、Amazon Kinesisを操作してみます。 Amazon Kinesisとは Amazon Kinesisは、Amazon Web Servicesが提供するストリーミングデータをリアルタイムに処理する為のサービスです。近年ビッグデータの処理や分析が注目されてきましたが、バッチ処理が主流でした。Amazon Kinesisを利用すると、リアルタイムにストリーミングデータの処理や分析が可能です。また、Ama

    RubyからAmazon Kinesisを操作する - Tech-Sketch
  • 1