タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

athenaとglueに関するclavierのブックマーク (1)

  • AWS Glueのお試し:ジョブを動かしてみるのと、ついでに気づいたAthenaとの連携を確認 - 冥冥乃志

    前回、全体像を追いかけてクローラを実行するだけで結構なボリューム行ってしまったので続きです。 mao-instantlife.hatenablog.com 今回は右から左に流すジョブを作ってみるのと、その過程でわかったことを何点かまとめておきたいと思います。 Webコンソールからジョブを作る ソースもターゲットが単一で、単にマッピングの変更があるレベルであればウィザードから作成するだけでジョブが作れます。下図のように、ソースもターゲットもウィザード上はラジオボタンなので、ソースやターゲットが単一でないようなレベルのジョブを作りたい場合は、メインのソースやターゲットのみ決定してテンプレートとして作った後でソースを編集するなどの方法を取る必要があります。 ちなみに、ジョブの全般的な設定でTemporary directoryの入力が必須なんですが、デフォルトでは何も入力されていません。スクリプ

    AWS Glueのお試し:ジョブを動かしてみるのと、ついでに気づいたAthenaとの連携を確認 - 冥冥乃志
  • 1