メダリオンアーキテクチャを実現するDatabricksによって進化したSalesNowのデータ基盤

会社についてSalesNowでは、従来のBtoBセールスの働き方を根本から変革し、社会の生産性の向上を実現させるべく、"SaaS + Database を軸とした企業データベース" 「SalesNow」(https://top.salesnow.jp) を展開しています。 扱うデータは"企業に関する様々な情報"で、それを独自に収集/蓄積した後、加工/価値化し、SalesNowというサービスを通じてユーザ様へ提供するというのが、おおまかなデータの流れです。 ツール導入前の課題創業当初よりAWSを利用しており、Databricks導入以前は以下の構成でした。 データの永続化：Amazon Aurora PostgreSQL（以降、Aurora PostgreSQL） データの加工：AWS EC2（以降、EC2）＋ cron データチェックのためにはAurora PostgreSQLへ接続が必要