エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
Everything (It's you)をFirehoseでparquet形式にしてみた - Qiita
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
Everything (It's you)をFirehoseでparquet形式にしてみた - Qiita
Kinesis3兄弟 言わずも知れた3兄弟のうち、Firehoseを触ってみました。(自分用のメモです) Firehoseっ... Kinesis3兄弟 言わずも知れた3兄弟のうち、Firehoseを触ってみました。(自分用のメモです) Firehoseって? ストリーミングデータを確実にキャプチャおよび変換し、データレイク、データストア、および分析サービスに配信する、抽出、変換、ロード (ETL) サービス とありますが、とりあえずEverything (It's you)=>parquet変換を試してみました。 (JSON=>parquet変換ですね) Firehose配信ストリーム作成 Source Kinesis Data Streamsから取り込むか、直接Firehoseへ書き込むか。 今回はDirectPUTを試行。 Destination 出力先を色々選べますが、今回はS3を選択。 ストリーム名を設定 データ変換の指定 Record format converionをEnabledに。 Output fo