みんなのウェディングのデータ分析基盤の現状 — みんなのウェディングエンジニアリングブログ

こんにちは、みんなのウェディングの小室 (id:hogelog) です。 今回はみんなのウェディングにおけるデータ分析基盤の現状についてご報告させていただきます。 三行まとめ 忙しい人のために先に結論を書くと bricolage と embulk で Redshift に集めて re:dash で分析 です。 データ収集 データ収集は bricolage のジョブネット機構を用いて bricolage の各種ジョブや embulk を連携させ、Redshift にデータを取り込んでいます。 参考までに https://github.com/hogelog/dwh-example に簡単な構成例を準備しました。 MySQL → Redshift みんなのウェディング http://www.mwed.jp/ のデータベースとしては MySQL を利用しています。 MySQL から Redshi

[hogelog]

みんなのウェディングデータ分析基盤の現状報告を書きました。

[ishideo]

[re:dash][mysql][apache][log]

[motchang]

RedShift事例だ

[time_waster]

[re:dash]

[d4-1977]

基盤が作られている感ある

[kgrock]

みんなのウェディングのデータ分析基盤の現状

[MKnkgw]

hogelogさん、最近データ分析してたんですね。

[hc0001]

ampだ

[hokaccha]

よい

[iga_k]

よい

[natsutan]

これで東大生も結婚できるようになるのだろうか

[moro]

よい

[chezou]

hogelog氏も、Data Engineer業してる/ bricolage+embulkでETL、Redshiftにデータ集約して、re:dash & pandas+Jupyterで可視化＆分析