1100万行・32GB超の巨大CSVファイルの基本統計量を4GBメモリマシンで算出する - Qiita
はじめに この記事は，Kaggle Advent Calendar 2022第6日目の記事になります。 本記事では、 32GB超のCSVデータの基本統計量を、小規模マシンでも省メモリかつ高速に計算するテクニック について解説します。 Kaggleコンペに限らず、 マシンスペックが低いため、大きなデータセットを満足に処理できず困っている 毎回行うファイル読み込みが遅いので、もっと高速化したい ⚡ といった悩みや課題を抱えている方の参考になれば幸いです。 モチベーション データ分析業務やKaggle等のコンペティションで初めてのデータセットを扱う場合、いきなり機械学習アルゴリズムを行うことはまず無く、最初にデータ観察を行うのが一般的です。 テーブルデータであれば、各カラムの基本統計量（最小値、最大値、平均、分散、四分位数）などを計算・可視化し、データクレンジングの要否や特徴量設計の方針などを検
名前負けしてない冷凍ごはん専用容器「極」
ちょっといいキッチングッズ 先日、当サイトの取材で担当編集の古賀さんにお会いした時、「パリッコさん、これいいらしいですよ。好きそうだと思って」と、おみやげにもらってしまったものがあるんです。 炊いたはいいけど残ってしまい、ごはんを冷凍保存しておく機会ってけっこうありますよね？ もしくは、そのほうが便利だから、ごはんは多めに炊いてわーっと冷凍しておくって方もいるでしょう。そういうとき専用の容器「極（きわみ） 冷凍ごはん容器」という、ちょっといいキッチングッズ。 これです 一見普通のタッパーみたいな こいつがですね、なんとこのふたつセットで、約1000円くらいするらしいんですよ。100均だったら200円で買えますよね。僕がいつもやっている、単にサランラップで巻いておく方法ならば、1回数円。それに比べて、本気度が段違い。さすが古賀さん、たまらなく好きです、こういうの！ というわけで、さっそく使っ
舞台制作会社 ネルケプランニングがサイバーエージェントグループに参画
株式会社サイバーエージェント（本社：東京都渋谷区、代表取締役：藤田晋、東証プライム市場：証券コード4751）は、漫画やアニメ・ゲームを原作とする2.5次元ミュージカル(※1)業界のトップランナーである舞台制作会社 株式会社ネルケプランニング（本社：東京都目黒区、代表取締役：野上祥子 以下ネルケプランニング）の発行済株式を取得し、ネルケプランニングがサイバーエージェントグループ入りしたことをお知らせいたします。 ネルケプランニングは1994年に設立され、2003年に初演したミュージカル『テニスの王子様』のヒットを機に2.5次元ミュージカル市場を開拓し、現在も2.5次元ミュージカルのトップランナーとして業界をけん引する舞台制作会社です。2.5次元ミュージカル市場は2021年実績で239億円と推計されており（ぴあ総研調べ※2）、ネルケプランニングはミュージカル『テニスの王子様』、ミュージカル『刀
予算めちゃくちゃかかってるのに大コケした映画ってなんかある？教えて！..
予算めちゃくちゃかかってるのに大コケした映画ってなんかある？教えて！！！
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
