はてなブックマーク

Google Colaboratoryの定期実行機能が、使えそうだったので、メモしておきます。 Colaboratoryでも定期実行ができるようになっていた。 前からあった？？ 14日間までの間で指定して、定期実行ができる。 pic.twitter.com/btXqQxboLS— カレーちゃん🍮 (@currypurin) March 12, 2022 この左の一番下にありました。 もしかしたらcolab pro+限定なのかもですね。まだアナウンスもされていないかもです。 pic.twitter.com/AXWVztdmLh— カレーちゃん🍮 (@currypurin) March 12, 2022 ツイートのように、時間を指定して定期実行可能 1回から13日間連続まで指定可能 最大ランタイム時間は4時間 GoogleDriveに接続しておけば、Driveのファイルも読み込めるし、書き

6月18日に「第２回分析コンペLT会」を実施しました kaggle-friends.connpass.com この会は、Kaggleなどのデータ分析のコンペに関連するLT（ライトニングトーク）を行う会として、企画しています。 目的としては、主に次の２点です。 分析コンペの技術・ネタで楽しみたい 仲間・知り合いを増やしたい 今回も次のように５名の方に、とても素敵な発表をしてもらいました。 発表者 タイトル 資料 nyk510 pythonで気軽にパッケージを作るのは良いという話。 資料 fkubota ルールベース画像処理のススメ 資料 Tawara みんなが知らない pytorch-pfn-extras 資料 fam_taro PyTorch Lightning 2021 (for MLコンペ) 資料 araisan Kaggle昔?話 資料 以下、発表資料と動画です。 pythonで気軽

3月2日に開催された、分析コンペ 勉強会で、「Colaboratoryで分析コンペをする時のテクニック集」として発表をしました。 speakerdeck.com この記事では、その内容を書きたいと思います。 Colaboratoryテクニック9つ 1. テーマの設定（darkモード等）、エディタの設定（インデント幅等） 2. ColaboratoryかKaggleNotebookか判別 3. Notebook名を取得 4.Google Driveのファイルへのアクセスを許可 5.学習する際は、MyDriveはなるべく使わない 6.a Kaggle Apiを使用する 6.b データのKaggleDatasetsへのアップロード 7 Mydriveからのweightのロードが遅い場合 8 Githubのrepositoryをclone public repositoryをcloneする場合 p

「Kaggleのチュートリアル」の第５版をKindleで公開しました。 公開から５日間限定で、無料公開を行っていますので、是非ダウンロードください。 Kaggleのチュートリアル第５版 作者:カレーちゃん発売日: 2020/12/22メディア: Kindle版 この記事はKaggle Advent Calendar 2020 - Qiitaの25日目の記事として書いています。 Kaggleとは Kaggleは、はじめるのが、少しだけ難しい Kaggleのチュートリアル目次 第４版から更新したところ もらった感想など 参考サイト Kaggleのチュートリアルの第１版から第４版 （販売は終了しています） この本を読んだ後の学び方など その他、思ったこと ここ数年の国内でのKaggleの盛り上がり kindle direct publishing（KDP） 簡単ですぐに公開できた Kaggleと

2019年下期のAmazonのアフィリエイトリンクでの、売り上げ部数が多かった上位３冊を紹介します。 私のAmazonアフィリエイトのリンクから売れたものでのランキングなので、その点は留意ください。 2019年上半期の記事はこちらです。 第１位 [第2版]Python 機械学習プログラミング 達人データサイエンティストによる理論と実践 (impress top gear) 作者:Sebastian Raschka,Vahid Mirjalili出版社/メーカー: インプレス発売日: 2018/03/16メディア: 単行本（ソフトカバー） Kaggleのチュートリアルの次に読むと良むならこの本と紹介することが多かったので、上半期に続き１位になりました。 年間では150冊くらい買ってもらえました。なかなかすごい。 私は初学者の頃に読んだ本なので、改めて読み直したいと思ってきました。今読むとまた

この記事は、kaggle Advent Calendar 2018 - Qiitaの24日目の記事です。 この記事では、先日終了したkaggleのPLAsTiCC コンペで私が行った、特徴の管理の仕方を紹介します。 コンペを約2ヶ月ほど戦い、数千の特徴を作り特徴管理が破綻しなかったので、最低限の管理はできていたとは思います。 ただし、これがベストだとは思っていなくて、強い方からマサカリ・アドバイスをもらって、より良い管理方法を模索したいという思いもあり、この記事を書いてみました。アドバイスなどあれば、是非コメントお願いします。 参考にした方法など コンペでの特徴管理にあたり、次の２つのブログを参考にしました。 Kaggleで使えるFeather形式を利用した特徴量管理法 feather - pandasの読み書きを高速化 基本的にこの記事の方法は、1.のブログで紹介されている方法を前提とし

Santenderコンペで、８位・金メダルという結果を残すことができました。 この記事では、Santanderコンペで金メダルをとるための手法や、コンペで金メダルをとった過程をまとめます。 santanderコンペ8位でフィニッシュしました！！ 初めて真剣に取り組んだコンペで、ソロゴールドメダルという、ほぼ最高の結果をだすことができたのは、自分でも奇跡なんじゃなないかという感想です。 夢であり、目標のkaggleマスターに一歩ちかづくことができました！ pic.twitter.com/rP7dhWx0US— カレーちゃん(専業Kagglerになりました) (@currypurin) 2018年8月21日 Santanderコンペの概要 評価指標 データの特徴 リーク Santanderコンペで金メダルをとった手法 Santanderコンペで金メダルをとるまでの過程を時系列で 開始直後6月か

kaggleをやっていると、過去のコンペの上位の手法を調べたくなることがあります。 そんな時に使えるKaggle Past Solutionsというサイトがあります。 この記事では、Kaggle Past Solutionsについて紹介します。 どんなサイト 次の画像のように、コンペ名や、コンペのタイプ、Evaluation（評価指標）、ソリューションへのリンク、インタビュー記事へのリンクなどがまとまっています。 Kaggle Past Solutionsのサイト画像 使い方 開催中のコンペについて、過去のコンペで使えるソリューションがないか探すときに使えるサイトだと思います。 開催中のコンペと同じタイプのコンペや、同じ評価指標のコンペなどを、Seachから検索し ソリューションへのリンクやインタビュー記事へのリンクを見てみましょう。 感想 過去のコンペの上位の解法を参考にするのは常套手段

Keynoteが2018年6月15日のアップデートにより、LaTeXで数式の入力可能になりました。 これまでは、Pagesを使ったり、LaTeXiTを使ったりしていたのですが、 このアップデートにより、Keynoteだけで数式入力をふくめ完結するようになりました。 微修正や、コピーなどが簡単にできるので、スライド作りがとても捗ります。以下どのような使い勝手になったか紹介してみます。 使い方 入力 上の図のように、挿入から方程式を選択します。 ショートカットキーは、alt + ⌘ + E　です。 すると、上の図のように方程式を編集と表示されます。 ここにLaTeXまたはMathMLを入力すると数式がプレビューに表示されるので、問題なければ挿入をクリックします。 すると、数式が画像として貼り付けられます。 修正とコピペ １度入力した数式を修正する場合は、数式の画像をダブルクッリクしてやります。

iPadはpdfの書類を読むのに最高に便利ですよね。 会うたびに友人にオススメしていたら、友人がiPadを購入しました。 すると、アプリやアクセサリを購入して、すぐに私よりも使いこなしていたので、私もiPadProのアプリを買ったりアクセサリを購入しました。 もっと早く購入すべきだったと後悔するぐらい、さらに最高の使い勝手になったので、紹介します。 全部で4,000円の追加投資で、ここまで最高の使い勝手になるのだから、絶対にオススメです。 以下買って良かったと思う順に記載します。 GoodNotes 4 GoodNotes 4 Time Base Technology Limited仕事効率化¥960 ipadでpdfを扱うときの定番アプリらしい。 これまでは他のアプリを使っていて、不満はなかったんだけど、GoodNotes 4は次元が違いました。 ApplePencilで文字が書けるのは

データリファインメントでは、技術書典４で「kaggleのチュートリアル」を頒布しました。 技術書典４について書きたいことはだいたい書いたので、一旦まとめておいて、さらに書きたいことがあったらここに追記します。 色々なことをはてなブログとnote.muとtwitterで書いているので、自分でもなにをどこに書いたかまとめておかないと忘れてしまうんで、自分用のまとめでもあります。 販売ページ、サポートページ 販売ページ サポートページ 本の目次 試し読み 第１部（１章から３章） ４章 結果 商業出版 アクセス数、フォロワー数等 その他 販売ページ、サポートページ 販売ページ note.mu サポートページ www.currypurin.com GitHub - currypan/tb4-datarefinement: 技術書典4、kaggle本のサポートページ（予定地） 本の目次 第１部 第１章

技術書典４に申し込んだけれどもまだキャンセル可能だという時期に、 自分の中の ・自分みたいな素人が技術書書いたってバカにされるだけだという勢力と、 ・技術書典で販売側に立ちたい&もし良いものができなくても今後成長すればいいでしょうって勢力 が闘っていた時に、背中を押してくれた結城先生のツイートを貼ってみます。 もしかしたら、これが次の誰かの脊中を押すかもしれないですしね！ 結城先生のツイート そして思います。文章は、そのつど書かなきゃ駄目ということを。経験を積んでから、十分学んでから、時間ができてから書くのではない。断じて違う。そのつど書く。自分の不十分さをたっぷり自覚した状態で書く。そうでなければ、いつまでたっても書けやしない。— 結城浩 (@hyuki) 2017年11月16日 あなたに強制するわけではなくて、結城の独り言です。十分準備ができて、世の中に出しても恥ずかしくない状態になっ

技術書典４のデータリファイメントで販売するものは、以下の通りです。 kaggle本 本来価格1,500円のところ、先着200冊限定で1000円で頒布！ 200冊の頒布が終わった後は、本来価格1,500円での頒布となります。 kaggle本のpdf版 note.mu pdf版については、上記のリンクから500円で販売しますので、pdf版もできれば同時購入ください。 紙の書籍にこださりがないかたは、pdf版だけ購入してもらうのもありです。 pdf版の良いところ ・リンク先にかいてあるように、今後更新があります！ 参考リンク 本の紹介や、試し読み版 4/22技術書典新刊のkaggle本の書評をいただきました。 - currypurin’s diary 技術書典４でKaggleの本を書いた理由 - currypurin’s diary 技術書典4kaggle本のお試し版 // Speaker De

4/22の技術書典で販売するKaggle本の一部を公開します。今回は、タイタニックコンペのページの翻訳です。Kaggle本では今回翻訳したもの(単純に翻訳したもの)だけではわかりにくいところを解説しており、その部分についてはその２で公開します。 本の詳細については、次のリンクから確認ください。 技術書典4のkaggle本のサポートサイト - kaggleを全力でやります Overview (概要) Description (説明) ここから始めよう もし、データサイエンスや機械学習に慣れていない、あるいは、Kaggleのコンペの簡単な説明を探しているのであればこのコンペから始めよう。 コンペの説明 タイタニック号の沈没は、歴史上最も悪名高い船の事故の1つです。 タイタニック号は初めての航海中の1912年4月15日に氷山に衝突して沈み、2224人の乗客と乗組員のうち1502人が死亡しました。

技術書典4のkaggle本サポートサイトです。 4章、5章、付録のコードを公開します。 ４章 ５章 5.1と5.2 5.3.1 5.3.2と5.3.3 5.3.4 付録 付録A 付録B 付録D 以下は、発売までの経緯など。 4/22技術書典新刊頒布します。 2018年4月22日に秋葉原で開催される技術書典４で、Kaggleのチュートリアル（タイタニックコンペ等）についての本（同人誌）を販売します。 公式でのサークルページは、 techbookfest.orgになりますので、是非チェックください。 出来上がりましたら、このブログでほぼ全てを公開予定です。BTCとXPのアドレスを公開しておきますので、もし良ければ投げ銭おねがいします。 BTC→1NuiRWhRy5UhpgghFRgLchPGXBhNXi4iiB XP→XXvkrgz6Nsc14pF4o7ks5Bao3pkGHAfKev 目次

いつものように、Kaggleのtitanicのページをみていたら、以下のような表示があって、驚きました。 Kaggle公式のapiがベータ版でリリースされていたとのこと。 簡単に、データをダウンロードしたり、サブミットしたり、コンペ一覧を取得したりすることができてとても便利です。 使い方をまとめます。 最近追加されたと思われる記載 使い方 使い方は、公式のgithubである、GitHub - Kaggle/kaggle-api: Official Kaggle APIに書いてあり、使用例も含めてよくまとまっています。 公式は英語なので、わかりにくという方むけに、日本語で使い方をまとめます。 pip install kaggle　でインストール Kaggleのuser profileのページ(https://www.kaggle.com/ <username> 1/account) に移動し

KaggleのGrandmaster（グランドマスター）やmaster（マスター）という、もの凄く強そうな称号を聞きますが、 どのようにしたらGrandmasterやmasterになれるのか興味があったので、調べてみました。 以下、できるだけ詳細にかきとめます。 なお、この情報は、公式では、Kaggle Progression Systemに記載がある情報なので、英語が読める方はリンク先の情報にあたった方が正確です。 コンペの称号 Grandmaster（グランドマスター）とは master（マスター）とは メダルについて 称号をもらえる条件について Kernels（カーネル）とDiscussion（ディスカッション）での称号 カーネル 称号が与えられる条件 ディスカッション 称号が与えられる条件 Datasets（データセット）での称号 称号が与えられる条件 感想 更新履歴 関連エントリ

【更新後】更新後の本の内容 追記 この記事の内容は古くなり、技術書典で出す本の内容は変更となりました。 最新の情報は、技術書典４でKaggleと機械学習についての本を出します。 - currypurin’s diaryにまとめていますので、ぜひ参照ください。 Kaggle&機械学習の薄い本 技術書典３に遊びに行って、自分も技術書を書きたいと思って、はや３ヶ月。 currypurin.hatenablog.com 本日、２月４日が、技術書典４の応募サークルの当落発表日でしたが、無事に当選となり、４月２２日の技術書典４で薄い本をだせることとなりました。 書く本の内容は以下1.から3.のような内容で、目次は現状サークルカットの画像のとおり。 Kaggleのタイタニックチュートリアルで、色々なアルゴリズムを使って分析してみて、初サブミットをするというのがメイン。 アルゴリズムの説明も少しだけする。