AWS Glueのオンラインセミナー受けてみた - Qiita

「AWS Black Belt Online Seminar AWS Glue」の自分向けメモ AWS Glueって何？......レベルの人向け Glue登場の背景 ビッグデータがキーワード データ分析のプロセスは以下 収集 保存 分析 活用 ビッグデータが注目される前、ほとんどCSVやRDS上のデータとして保存 今日ではIOTによる大量データや様々なデータ形式が使われている 大量データの生で保存、かつ必要なときに必要分取得、活用できる保存場所が求められた データレイクの登場 様々なデータソースから生成される生データをそのまま保存する 生データは分析するために前処理（ELT処理）が必要 フルマネージドでサーバーレスなELTサービス データカタログによって、他サービスとの連携が容易 暗号化対応 機能 全体像 クローラーによってデータソースからメタデータ（テーブル構造やスキーマ）をクロール