kyopecoのブックマーク - はてなブックマーク

時間のかかる前処理をDaskで高速化 - ぴよぴよ.py
最近仕事で自然言語処理を使ったモデルを作成していたんですが、前処理やモデルを作る際に数分〜数十分単位の処理待ちの空き時間が頻繁に発生してしまい、その度集中力が切れる問題に悩まされていました。モデルの学習に時間がかかってしまうのはまた別の解決策を考えるとして、今回は時間のかかる前処理をDaskをつかって高速化した方法をお話ししようと思います。この記事は PyLadies Advent Calendar 2018 - Adventar の18日目の記事になります。 Daskとは？ Daskとは、numpyやpandasなどのデータを簡単に並列計算するライブラリ。あまり公式のチュートリアルがわかりやすくない(気がする)ので、基本的な使い方は Python Dask で並列 DataFrame 処理 - StatsFragments を見てみると良い。サンプルデータ今回はKagg
kyopeco 2018/12/19
リンク
強くなるためのプログラミング -様々なプログラミングコンテストとそのはじめ方- - ぴよぴよ.py
みなさんは何のためにプログラミングをしていますか？仕事のため、何かをつくるため。それも良いけれど、「強くなる」ためにプログラミングしてみませんか。様々なジャンルのプログラミングコンテストとまだ見ぬライバルたちがあなたを待っています。今回はアルゴリズム/AI/機械学習/セキュリティ等の様々なジャンルのコンテストとその始め方について紹介したいと思います。 ※これはPyConJPでの発表を文字におこしたものです。が、Pythonの話は殆どないです。プログラミングコンテストとは？すべてのコンテストに共通する、「コンテストに参加する利点」 1. 自分と同じ問題を解いた、他の人の解法を知ることができる 2. 同じコンテストに出ていた、たくさんのライバルと知り合えるアルゴリズムのコンテスト問題1 問題2 TopCoder Single Round Match CodeForces AtC
kyopeco 2015/11/10
リンク
シンプルなKeynoteのテーマ作った - ぴよぴよ.py
研究発表等で使っているシンプルな自作テンプレートをGithubにアップしたので紹介しようと思います。テーマ「Mint Green」ミントグリーンがベースのシンプルなテーマ。タイトルにはスマートフォント UIというフォントを利用していますが、これを入れてなくても問題なく使えると思います。テーマ「Violet」紫がベースのシンプルなテーマ。Mint Greenの色違い。こちらも、タイトルにはスマートフォント UIというフォントを利用していますが、これを入れてなくても問題なく使えると思います。テーマ「Scarlet」赤がベースのテーマ。フォントはヒラギノ角ゴ + Avenir Next。こちらからDLできますリポジトリ: GitHub - cocodrips/keynote-themes: Free Keynote templates. 良かったら自由にDLして使ってくだ
kyopeco 2014/12/08
あとで使わせていただきます

*presentation
リンク
1