はじめに これはドリコムAdventCalendar2015で掲載した記事をもとにした転記です。 ドリコム Advent Calendar 2015 – ドリコムを支えるデータ分析基盤がTD+AWSに移行した話 ドリコム Advent Calendar 2014 – ドリコムを支えるデータ分析基盤 分析基盤をTreasure Dataに移行 オンプレ環境の Hadoop から Treasure Data に移行しました。 また、ジョブ管理ツールやBIツールといったサーバーも Amazon EC2 に移行が完了しており、 オンプレ環境からクラウド環境になりました。 背景 オンプレ環境で Hadoop を運用して3年も経つと考えなければならないのが HW の寿命です。 さてどうしようかとなった時に、ほぼ迷いなく外部サービスに移行するという選択を取りました。 Treasure Data、BigQ