どうやってBIまでデータを持ってくるのか。 - 文系データサイエンティストのブログ

BI(=Business Intelligence)を使って可視化するデータは、自社内で発生するデータ（=内部データ）と自社外で発生するデータ（=外部データ※1）に大別されるかと思います。 では、どのように内部データと外部データをBIまで持ってくるのか。以下はBI周りのアーキテクチャの一例です。 企業の内部データは、SAPに代表される基幹系システムから取得します※2。通常、基幹系システムからData Staging Area(DSA)を噛ませてData Warehouse(=DWH)にデータを持ってきます。 一方、外部データはOperational Data Store(=ODS)を噛ませてDWHにデータを持ってきます。 DSAやODSを噛ませてDWHにデータを持ってくる理由は、DWHが求める形にデータを変換するためです。変換といっても、データの正規化・非正規化やRDB形式への変換など様々