PandasのMultiIndexの速さ - Qiita

結論 MultiIndex は遅い。列名はtupleで保持しろ →大規模なデータセットだとMultiIndexが速い時がある？ 後の検証でMultiIndexが速い時が見つかったので、いずれ訂正版だします Qiita 非公開にする方法がないのですが、消すのもあれなので残しときます 背景 とあるPythonのソフトウェアにおいて、扱うデータを下のように実装した。 列インデックスに「カテゴリ」と「アイテム」の情報を含ませ、カテゴリで抽出したりアイテムで抽出したりする（実際は2レイヤではないし、行もレイヤのあるインデックスを持たせたりしている）。 ここでデータの例として各都道府県×12ヶ月のデータを用意した。地方と都道府県の情報をもたせてあり、「地方名で抽出」「都道府県で抽出」などの取り扱いをしたい。 データの中身はランダムである。 最初は列名を「地方_都道府県」として実装した（特にこのようにし