Python Dask で 並列 DataFrame 処理 - StatsFragments
はじめに 先日のエントリで少し記載した Dask について、その使い方を書く。Dask を使うと、NumPy や pandas の API を利用して並列計算/分散処理を行うことができる。また、Dask は Out-Of-Core (データ量が多くメモリに乗らない場合) の処理も考慮した実装になっている。 sinhrks.hatenablog.com 上にも書いたが、Daskは NumPy や pandas を置き換えるものではない。数値計算のためのバックエンドとして NumPy や pandas を利用するため、むしろこれらのパッケージが必須である。 Dask は NumPy や pandas の API を完全にはサポートしていないため、並列 / Out-Of-Core 処理が必要な場面では Dask を、他では NumPy / pandas を使うのがよいと思う。pandasとDas
【matplotlib】日本語の設定 - keisukeのブログ
Matplotlibで日本語を出力するのにかなり手間取ったのでメモ。 Windows, Python3を想定しています。 問題の説明 import matplotlib.pyplot as plt plt.figure() plt.xlabel('豆腐 - tofu') plt.title('豆腐 - TOFU') 日本語が文字化けして「□□」となってしまっています。日本語表示したいですね。 解決への道のり matplotlibの設定ファイルの場所を探す 日本語に対応したフォントのダウンロード matplotlibの設定ファイルを書き換える フォントのキャッシュの削除 matplotlibの設定ファイルの場所を探す import matplotlib matplotlib.matplotlib_fname() を実行してみてください。 あなたのmatplotlibが現在参照している設定ファ
Visual Studio Code and Unity
Version 1.94 is now available! Read about the new features and fixes from September. Unity Development with VS Code Visual Studio Code makes it easy to write and debug your C# scripts for Unity. This guide will help you make Unity and Visual Studio Code work together. If you're looking for resources to learn C#, check out our C# curriculum. Learn C# Curriculum If you're looking for resources to le
Adam論文概要とコード - Qiita
最近、機械学習系のタスクから離れていて(ずっとRails書いてました...そろそろ機械学習界隈の世界に戻らんと...) まだAdamの論文読めてなかったので、読んで適当に実装してみました。 motivation 簡単に実装できて、計算効率が良くて、省メモリで、スケールの影響も受けにくくて、大規模なデータ/パラメタに対して適応的なモデルを作りたい Adamの名前の由来 Adaptive moment estimation Adamの利点 AdaGradとRMSPropの良い所を合わせ持った手法 AdaGradはsparse gradientに強い(が、一次モーメントのバイアス訂正項がないのでバイアスが非常に大きくなって、パラメタの更新が非常に大きくなる) RMSPropはオンラインで非定常な設定で強い（がバイアス訂正項が小さな値になるとstepsizeがバカでかくなる） 初期値を与える必要は
GLSL Noise Algorithms
GLSL-Noise.md Please consider using http://lygia.xyz instead of copy/pasting this functions. It expand suport for voronoi, voronoise, fbm, noise, worley, noise, derivatives and much more, through simple file dependencies. Take a look to https://github.com/patriciogonzalezvivo/lygia/tree/main/generative Generic 1,2,3 Noise float rand(float n){return fract(sin(n) * 43758.5453123);} float noise(float
地震保険、福島・埼玉など５県で５０％値上げへ：朝日新聞デジタル
政府と損害保険各社が、福島など５県で家庭向けの地震保険料を、５０％引き上げることが分かった。最新の研究で、５県で地震による損害が起きる確率が高いとみなされたため。２０１７年１月から、３段階で引き上げる方向だ。 関係者によると、今回の値上げで上限となる５０％の引き上げに踏み切るのは福島、埼玉、茨城、徳島、高知の５県。損害保険各社でつくる損害保険料率算出機構が、月内にも新たな保険料率を金融庁に届け出る。 ５県を含めた全国平均の値上げ率は１９％だが、この５県は、地震の発生確率の高さなどから特に損害が起きる可能性が高いとみなされた。値上げ幅が大きいため、政府は２年ごとに３段階で値上げする方針。ひとまず１７年１月から全国平均で約５％引き上げる。一方で約１０の自治体は保険料を引き下げる方向だ。 地震保険は地震や津波で壊れた家財や家屋を補償する。火災保険や自動車保険と異なり、損保各社とともに国も保険金支
ルールベースから機械学習への道 公開用
The document discusses hyperparameter optimization in machine learning models. It introduces various hyperparameters that can affect model performance, and notes that as models become more complex, the number of hyperparameters increases, making manual tuning difficult. It formulates hyperparameter optimization as a black-box optimization problem to minimize validation loss and discusses challenge
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
