embulkでMySQLにコピーする時にハマったこと - Qiita

概要 embulk+digdagでデータベースのコピーを行い、コピーしたデータベースをmetabaseで閲覧できるようにしたデータ分析基盤を構築しました。 その際embulkを使ってMySQLにデータをコピーする時にいろいろハマったので、その解決方法を紹介します。 embulkとは？ 今回利用したembulkとは、以下のように紹介されています。 Embulk(エンバルク)とは、オープンソースの並列データ転送フレームワークです。 「fluentd」のバッチ版のようなバルク処理に特化したプラグインベースのデータローダーです。 大規模データセットのバルクインポートを行えます。 引用元：https://www.ossnews.jp/oss_info/Embulk 詳細は他のサイトに譲りますが、このようにembulkとはデータ転送を行うためのフレームワークで、これを利用することでymlファイルを作成