2021.05.19 コラム DockerEmbulkETLテックコラム 【テックコラム】Embulk on Docker でデータ転送基盤を簡単構築! ●はじめに こんにちは。テクノロジー本部の奥村です。 昨今、データの有効活用が叫ばれている中、様々な環境(オンプレサーバ、S3、GCS、TD等)からデータを転送する機会が多くなっているかと思います。 方法としてはCLIやpythonや各種SDKを使ってプログラムを書いたり、手動で実行したり、SaaSを使用したりと状況に応じて様々な方法があるかと思います。 今回はエンジニアの方向けに、より簡単にデータ転送基盤を構築する方法を書いてみました。内容としてはDocker上にEmbulk実行環境を構築するというものです。 ●Embulkとは? Embulkは、さまざまなストレージ、データベース、NoSQL、クラウドサービス間のデータ転送を支援する並