pythonでのデータ分析時、死ぬほど調べるTipsをまとめておく。 - プロクラシスト
こんにちは、ほけきよです。 pythonでデータを取り扱っているとき「あれ、これどうやるんだっけ？？」 ってなること、ありませんか？僕は10分に1回程度なります。 いや、覚えろと自分でも思うんですが、覚えられないんですよね。100回くらい同じコマンドを調べてたりする。 物覚えが良くないので、ココを見れば絶対大丈夫なようにしておこうと思い、まとめてみました。 jupyterで最初に開くときに読み込むモジュールたち datetime 日付⇔文字列の変換 datetimeの足し算引き算 json dict型⇔json jsonファイルの入出力 datetimeをjsonにする時、エラーが出る pandas ～以外を表すやつ andとor inf弾く リストをdfにサクッと変換 datetimeとして読み込み 読み込み時にcodecのエラーが出る DataFrameのfor文 numpy lins
【価格比較付き！】現在開催中のKindleセール情報(毎日更新) - プロクラシスト
【最終更新日時2018/03/01 23:50:00】 Kindleセール情報を毎日自動更新していきます！更新頻度は１日1回くらいの予定。 バーが緑色 : 無料 バーが青色 : 0~30%割引 バーが黄色 : 30~70%割引 バーが赤色 : 70%以上割引 ※注1 : kindle unlimitedは考慮外です。たまに無料のもあります。 ※注2 : たまに間違っているところもありますが、ご容赦ください。 月替セール IT/専門書フェア Kindleセレクト25 新着セール情報!! 【期間限定無料＆50%OFF以上】新しいスポーツの見方、教えます(3/8まで) 【30%～50%OFF】新年度・新学期！ライバルに差をつける「英語本」フェア(3/15まで） 【期間限定無料＆50%OFF以上】1話読んだらやめられないマンガ特集(3/15まで） 【20%OFF】「炎の蜃気楼」シリーズ完結記念キャ
【AWS, 統計, デザイン, ...】上半期に買ってよかった技術本たちの動機と感想！ - プロクラシスト
こんにちは、ほけきよです。 早いもので、2018年も半年が経ちました。 この上半期、転職して新しいタスクもかなり増えたので、色々と勉強しなければなりませんでした。 なので、今回は上半期に買ってよかった技術本をご紹介します！ こんな技術本が良いよ！っていうのがある人は教えてください。 AWS/コンテナ 合格対策 AWS認定ソリューションアーキテクト 動機 感想 AWS Lambda実践ガイド 動機 感想 AWSによるサーバーレスアーキテクチャ 動機 感想 コンテナ・ベース・オーケストレーション 動機 感想(途中) 統計/機械学習(初心者レベル) この世で一番おもしろい統計学 感想 嘘を見破る統計学 感想 デザイン Google流資料作成術 動機 感想 まとめ AWS/コンテナ 自社で運用しているサービスがAWS上にDockerコンテナを構築して動いています。 AWS、名前は聞いたことがあるけ
知識0だった僕がデータ分析をこれまでどう学び、これからどう使うのか - プロクラシスト
長かったデータ分析ガチ勉強カレンダーも最終日*1。 自分のこれまで歩いてきた道を軽く振り返ったあと、自分が思う機械学習/データ分析のあり方について書き連ねたいと思う。あくまで一つの価値観として楽しんでもらえればと思います。 データ分析って何？状態から やったこと わからないところを聞くレベルに達するまで わからないところが分かるようになると アルゴリズムをどう理解したか。 自分が思う、これからのデータ分析 良いデータが集まるところに価値が生まれる 実務のデータ分析は高い精度よりも低コストと高い説明能力 データ分析はトップダウン あくまで人間の補助、人間とのシナジーを考える まとめ データ分析って何？状態から データ分析業務を行うにあたって、まずはじめの難関は、言葉の壁だった。ほぼコンピュータと無縁の世界で生きてきた私は、「Linuxって何？Vimって何？」っていうのを毎日繰り返していた。
【Day-23】機械学習で使う"距離"や"空間"をまとめてみた - プロクラシスト
データ分析ガチ勉強アドベントカレンダー 23日目。 ここまでデータをどういう風に処理したり、どういうタスクをこなしていくかについて勉強してきたが、 一度基礎的な事項に戻ってみたいと思う。基礎だから簡単というわけではない。基礎だからこそ難しく、また本質的な内容。 データ分析で使われている手法などをまとめて集約して、簡単な説明を付け加えていく。 しかし、このあたりの数学*1は苦手なので、なるべく直感的に自分のイメージを書いていく。 われわれが生きている空間や、距離は"正しい"のか ユークリッド空間/ユークリッド距離 点の距離 分布の距離 wasserstein計量 カーネル(再生核ヒルベルト空間) Topological Data Analysis(TDA) 次元削減/Embedding PCA(principal component analysis) t-SNE(t-Distributed
Pythonでゼロから機械学習/データ分析を学ぶためのサイトマップ - プロクラシスト
データ分析ガチ勉強アドベントカレンダー 24日目。 当サイトでも、Pythonを使ったデータ分析や機械学習について、勉強しながらそれをアウトプットとして出すと言うかたちで、何個も記事を書いてきました。 記事数で言えば50とかそのくらいあるような気がします。 カレンダーも完成しつつあるので、個々では当サイトの総まとめとして、機械学習やデータ分析に触れたいという人がゼロから始めて触れられるように、記事をまとめていきたいと思います。 何か面白いことを勉強したい学生、就職までの勉強に、急に機械学習を使わなければならない社会人方々は、読んで見てください。 0. 環境構築 0.1. Pythonの導入 (Anaconda) 0.2. エディタ (Pycharm/VSCode) 0.3. バージョン管理 (Git) 1. Pythonの使い方(基本ライブラリ) 1.1. 数値計算 : numpy 1.2
【Day-14】株価や仮想通貨で使える、5つのテクニカル分析を解説&Pythonで実装してみた - プロクラシスト
データ分析ガチ勉強アドベントカレンダー 14日目。 時系列データでまず思いつくのは、株価のチャートですよね。 また、最近はやっている仮想通貨。私も最近coincheckに入金しました。 ビットコイン取引所 "coincheck" やっぱ、実際にお金が絡むとちゃんと勉強しようって言う気になる！笑 せっかくチャートを見るわけだし、その見方について勉強しておこうと思いました。 そしてせっかくなので、自分で実装してどういう仕組みなのかまで知っておこうと思いました。 理系だからね、分からないものを使うのは嫌だからね。 というわけで、Python(主にPandasとMatplotlibを用いながら)でテクニカル指標についてやっていきます。扱うデータは三年分の日経平均株価。 指標について知りたい人も、自分で実装してみたいという人もどうぞ。 テクニカル分析とファンダメンタル分析 実装において ローソク足
【Day-1】データ分析/機械学習を行うために知っておきたいことを列挙する - プロクラシスト
データ分析ガチ勉強アドベントカレンダー一日目。 まずは指針をということで、データ分析をはじめるにあたって勉強しておきたいことと、そのリソースをまとめる。言語はPythonを想定。 興味領域が偏っている場合があるのであしからず こんなの面白いよっていうのあれば教えてくださいな ※随時更新します Pythonライブラリ 深いアレたち 機械学習のお勉強 論文 arXiv カンファ e-learning 本 twitter データを集める チートシート類 終わりに Pythonライブラリ こんなの勉強しておけば良さそうリスト。抜け漏れご容赦。 ★★★ : 必須。空で使えるようになりたいトコロ。 ★★ : 周辺ツール、知っていればより便利になるよという感じ ★ : あるアルゴリズムに特化しているようなもの。一歩先 ライブラリ 必須度 用途 numpy ★★★ 数値計算用のライブラリ。いろいろし
jupyterのテーマカラーが超簡単にかっこよくなる『jupyterthemes』 - プロクラシスト
jupyterがどう便利なのかは、以前の記事に書きましたので、知らない方はどうぞ！ www.procrasist.com 一つ不満があるとしたら、背景色がクールじゃないことです。 別に背景色がクールだからといって進捗が無限に発生する！わけではないんですが、気持ちの問題です。 簡単にできないのかなぁと思って調べていたら、驚くほど簡単だったので、メモしておきます。 Jupyter theme 利用可能なテーマ テーマを変える テーマ見本 chesterish grade3 gruvboxd gruvboxl monokai oceans16 onedork solarizedd solarizedl まとめ Jupyter theme まず、テーマをpipでインストール pip install jupyterthemes コレで、背景色を変える準備が整いました。簡単！ 利用可能なテーマ jt
大学の数学/物理を無料で学べるおすすめサイト・サービス6選 - プロクラシスト
高校生のほけきよ少年にとって、得られる大学以上の物理や数学の情報はwebサイトだけでした。 物理や数学の専門書って高いんですよね。あと、大きな本屋じゃないと取り扱っていない。 今ではamazonでいろいろな書籍が手に入るようになりましたが、高いしどんな内容がかかれているかは分からないので、買うのもためらわれます。 そこで今日は 好奇心溢れる高校生 お金はない、単位が危ない、やる気に溢れた大学生 社会人になってから物理や数学を趣味で始めたい人 たちのために、無料で大学以上の内容を学べるサイト/サービスを紹介します！ 1. 物理のかぎしっぽ 2. EMANの物理学 3. MITの物理学講義(Youtube) 4. 現代数学観光ツアー 物理のための解析学探訪 5. 数学：物理を学び楽しむために 6. 高校数学の美しい物語 まとめ ※ここでいう数学は「物理学のための数学」の範疇を超えません。 1.
爆速で資料を作る！レベル別パワポショートカット集 - プロクラシスト
こんにちは！ほけきよです。 世の中のクリエイティブな仕事という人たちがどんな仕事をしているか知っていますか。 *1 この資料作成が2倍早くなると、どうなりますか？こうなります。 クリエイティブな時間を少しでも増やすために、パワポの効率化は不可欠なのです。*2 今日は、大学院から社会人にかけての数年間でパワポ職人となりつつある私が、爆速で資料を作る方法を紹介します。 絶対覚えておくべきものから、他の人と一歩差をつけられるものまで、レベル別に取り揃えるので、是非是非ご覧ください ※ 今回のはWindows PowerPoint 2016版です。互換性は各自試しながら確認してください。 初級編 超基本 スライドショー編 その他Tips 中級編 文字列の編集 微調整のCtrlキー マウス移動時Tips 上級編 図形を爆速で並べるための"位置揃え, 整列" 数式が書きたい マウスを使わずフォント変更
Google Search Consoleの検索順位とクリック率を分析して、リライト戦略を考える - プロクラシスト
こんにちは、ほけきよです！ ある程度経験を積んだブロガーなら、Google Search Consoleを使っていることでしょう。 自分の記事にどういう単語を調べた結果辿り着いているかがわかるツールです*1 ブログも開設して時間が経つたびに、「検索流入」の重要性をひしひしと感じるようになります。 そんな時にSearch Consoleを使うと、リライトすべき記事が浮き上がってくる。というわけです。 私の記事も検索流入がちょっとずつ増えてきたので、 Search Consoleでの結果を分析することにしました。*2 Search Consoleで抜き出したデータ 1-10位 1-30位 1位-30位 (表示回数で分けたver.) これからの戦略を練る バズった記事はレッドオーシャン戦略 11-15位はブルーオーシャン戦略 まとめ Search Consoleで抜き出したデータ まず、はじめに
はてブ情報をpythonで可視化できるようにしたよ！ - プロクラシスト
こんにちは！ほけきよです！ はてなブログをしている皆さんなら、当然アレ、気になりますよね？？ そうはてブです。 自分の記事が拡散された時の満たされる感じは、クセになりますよね。 今回は、自分の記事のはてブがどのように増えて行くかを、APIを使って取得できるようにしてみました。 また、はてブが伸びるかどうかを左右する情報も取得できるようにしました！！ 基本コピペでOKになっているはずなので、pythonを使っている方は、一回試してみると楽しいですよ！ 必要なモジュール コード はてブの情報を取得 コード はてブの伸びを左右する情報たち コード プロットをする コード 実行してみる コード 結果 比べることもできる 結果 まとめと今後やりたいこと 必要なモジュール まず、モジュールをインポートしていきましょう。デフォルト以外で入れなければ行けないのは以下の二つ bs4 (webスクレイピング用
【xkcd】pythonコードにたった一行で漫画のようなグラフを作る！ - プロクラシスト
xkcdとは 世界一で最も人気のあるウェブ漫画の一つです xkcd: Code Quality 3 ランダル・マンローが2005年9月に開設 皮肉や風刺が得意。理系ネタが結構多い。 現在は週3回更新されている キャラやフォントが特徴的 これとか皮肉が効いてていいですね！好きです A : 寝ないの？ B : 寝られないんだ、大事なことがある A : なによ？ B : 誰かがインターネットでボロを出してるんだ xkcd: Duty Calls 実はmatplotlibを使えば、グラフをxkcd風に仕立てられます。しかもたった一行で！今回はその紹介をします xkcdとは matplotlibで、xkcd requirement 使い方 MatplotlibのHPもxkcd風に サンプルを見てみる 3D 円グラフ 最後に matplotlibで、xkcd requirement matplotli
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
