SageMakerの前処理をGlue開発エンドポイントで実行させる:Amazon SageMaker Advent Calendar 2018 | DevelopersIO
SageMakerの前処理をGlue開発エンドポイントで実行させる:Amazon SageMaker Advent Calendar 2018 概要 こんにちは、データインテグレーション部のyoshimです。 この記事は「クラスメソッド Amazon SageMaker Advent Calendar」の9日目の記事となります。 今回はSageMakerの前処理を「AWS Glueの開発エンドポイント」で実行させてみます。 下記を参考に進めていきます。 Managing Notebooks Working with Notebooks on the AWS Glue Console AWS Glue コンソールでの開発エンドポイントの操作 以前に、「SageMaker-EMR-Glue-S3」と接続させて前処理をする構成についてのエントリーをご紹介したのですが、それと少し似ています。今回は
AWS Step Functionsを動かしてみる - Qiita
概要 AWS Step Functionsでバッチ処理っぽいことをする。 内容: LambdaからS3に置いてあるファイルを読み込んで、最終更新が今日より古かったら、ファイルのデータをデータベースへ放り込む。 ↓の続きです AWSでバッチ処理をするときの方法を考える 実践 1. バケットを作成し、サンプルjsonファイルを入れておく。 jsonファイルの内容は下記のようにしました。 { "datetime": "20170821", "id": "0001", "type": "donut", "name": "Cake" } var aws = require('aws-sdk'); aws.config.region = 'us-east-2'; var bucket = 'xxxxxxxxxx'; //自前のS3バケット名に書き換え var s3 = new aws.S3(); va
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
