株式会社カブクで、機械学習エンジニアとしてインターンシップをしている杉崎弘明(大学3年)です。 目次 本記事の目的 探索的データ解析(EDA)とは何か KaggleのコンペティションでEDA サイズの大きいデータの扱い方 DASK EDAの実行 最後に 本記事の目的 本記事では探索的データ解析(EDA)の説明と並列処理フレームワークDASKの処理解説、DASKを用いた実際のデータに対するEDAの一例を紹介いたします。 データはKaggle Competitionにおいて公開されている「TalkingData AdTracking Fraud Detection Challenge」を使用します。 Kaggleという言葉を初めて聞いた方は以下のサイトなどをご覧ください。 – https://www.codexa.net/what-is-kaggle/ 実行環境 – OS: Ubuntu 16
![DASKによる探索的データ分析(EDA) - 株式会社カブク](https://cdn-ak-scissors.b.st-hatena.com/image/square/f9b7d0817f5f940298d3b95da7af70f0fe04d145/height=288;version=1;width=512/https%3A%2F%2Fwww.kabuku.co.jp%2Fwp%2Fwp-content%2Fuploads%2F2018%2F11%2Funnamed-1-6.png)