ETL(ELT)処理用フレームワークcliboaで独自のtransform処理をパイプラインに組み込む方法 - Qiita

概要 ETL(ELT)処理用フレームワークcliboaとは何かではcliboaの概要とクイックスタートまでを説明した。 cliboaは標準でバンドルされているETL処理だけでなく、開発者が独自にETL処理を実装して、実装したETL処理をパイプラインに組み込んで動かすことができる。本記事ではcliboaで独自のtransform処理を実装し、パイプラインに組み込んで動かす方法について紹介する。 前提条件 クイックスタートで説明した手順を一通り完了していること。 ファイル・ディレクトリ構造と拡張実装用ファイルの追加場所 cliboaをインストールした後、cliboadminコマンドによってファイル・ディレクトリ構造が生成される。 この中に、common/scenarioとproject/simple-etl/scenarioディレクトリがあり、拡張実装用のファイルはこの2つのディレクトリのいづ