Pandasで行うデータ処理を100倍高速にするOut-of-CoreフレームワークVaex - フリーランチ食べたい
TL;DR アウトオブコア、かつマルチコアでデータ処理を行えるVaexの紹介です。 string関係のメソッドで平均して100倍以上の高速化が確認できました。(作者のベンチマークだと最大1000倍) 文字列処理以外でも数倍~数十倍の高速化が行えそうです。 この記事では性能の比較のみ行い、解説記事は別で書こうと思います。 pandasより1000倍早いフレームワーク？ 今週、興味深い記事を読みました。重要な部分だけ抜き出すと次のような内容です。 Vaexの最近のアップデートでの文字列処理が超早くなった 32コアだとpandasと比べて1000倍早い towardsdatascience.com 1000倍って本当なの？って感じですよね。そもそも自分はVaex自体を知らなかったので調べてみました。 ちなみに調べていて気づいたのですが、この記事の著者はVaexの作者なんですよね。 疑っているわけ
Project Jupyter
Free software, open standards, and web services for interactive computing across all programming languages JupyterLab: A Next-Generation Notebook Interface JupyterLab is the latest web-based interactive development environment for notebooks, code, and data. Its flexible interface allows users to configure and arrange workflows in data science, scientific computing, computational journalism, and ma
pandas - Python Data Analysis Library
pandas is a fast, powerful, flexible and easy to use open source data analysis and manipulation tool, built on top of the Python programming language. Install pandas now!
昼行灯の通い路 - [Titanium Mobile]MacからAndroid実機転送時のエラー
Mac OS X Lion上でTitanium Mobileのアプリを実機転送しようとした際に起こったエラーをメモ。 Android SDKやTitaniumのインストールは書籍や下記ページを参考にしました。 https://sites.google.com/site/jagniigata/article/workshop/tiworkshop-doc?mid=54 インストール後、Titanium Studioで初期プロジェクトを実機に転送しようとしたが以下のエラーが発生。 実機転送時(エミュレータも？)のUnicodeDecodeError Traceback (most recent call last): File "/Users/sagyo/Library/Application Support/Titanium/mobilesdk/osx/1.7.5/android/bui
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Dash in 20 Minutes Tutorial | Dash for Python Documentation | Plotly
