Kaggleにおける「特徴量エンジニアリング」の位置づけ 〜『機械学習のための特徴量エンジニアリング』に寄せて〜 - u++の備忘録
はじめに 『機械学習のための特徴量エンジニアリング』の書誌情報 Kaggleのワークフロー 1. （探索的データ分析） 2. ベースラインモデルの構築 3. Validationの構築 4. 特徴量エンジニアリング 5. ハイパーパラメータ調整 6. アンサンブル 『機械学習のための特徴量エンジニアリング』の貢献箇所 Kaggle観点で本書をオススメする読者 おわりに はじめに このたび、『機械学習のための特徴量エンジニアリング』をご恵贈いただきました。 Kaggleと親和性が高い書籍名で、Twitterのタイムラインなどを見るに、Kaggleに興味がある層を中心に大きな注目を集めているようです。 本記事では本書の発売に寄せて、Kaggleの自分流のワークフローと「特徴量エンジニアリング」の位置づけについての私見を述べます。その上で本書がKaggleのワークフローのどの部分に寄与するかを説
Googleを見て悟ったプロジェクトで苦しむ理由 - フロイドの狂気日記
Googleに転職していきなり3ヶ月の育休を貰った - Software Transactional Memo マネジメントと設計の不備に不満を爆発させた2月だった。不愉快な思いをすると常に二度とそんなことになりたくないと思い、反省や対策を考え続ける。冷静に考えるとフリーになってもフリーになるまえの会社員時代も、不愉快爆発が要所要所で起こっていたなと思い出した。 個人でコントロールできることは少ないので、その時その時の理由があるとはいえ、僕自身に学習能力がないのか、と疑い始めたとき、冒頭の記事に出会ってようやく悟った。悟るのに10年かかった。ようするに僕自身のエンジニアスキルが並だから、苦労するのである。もし僕のスキルがGoogleから三顧の礼をもって迎えられるレベルであれば、さっさとGoogleに入って冒頭記事のようにいきなり産休とかもらえばいいのだ。 何をいまさら言っているんだ？と思わ
IoTセンサーとダイソーの電池式モバイルバッテリーは相性がいいかもしれない - Qiita
はじめに 貧乏IoTには100均が欠かせませんよね。 さて、以前から「もしかしたらな〜」と思っていて試していなかったこと。 USBで電源供給できるIoTセンサー類のバッテリーに100均のやつが使えないか？ まあいつか試そうと思っていて機会がなかったが、昨日ダイソーに行ったときに思い出したので108円(税込）の電池式モバイルバッテリーを買ってやってみました。 やってみた 結論から言うと、うまくいきました。 オムロン環境センサ USB型（2JCIE-BU)をダイソーの電池式モバイルバッテリーにつけてみた。電源が入ってデータが送信され、途中で切れることがなかった。 1時間ほど環境センサのデータをAmbientに送ってみたらちゃんと送信されつづけていました。うむ、これはコスパがいい！ なにがうれしいのか？ それ、なにがうれしいの？という方もおられると思うので、うれしいことを説明しておきます。要点は
クラウドファンディング、製品来ないまま倒産 支援金はどうなる？ 運営元「Makuake」に聞いた
クラウドファンディングを行っていた企業が、支援者に製品を届けないまま破産手続きを始めた――そんな問題が、クラウドファンディングサイト「Makuake」利用者に波紋を呼んでいる。 問題になったのは、同サイトに掲載されているいびき防止グッズ「イビキトリーナ」のプロジェクト。1件でも支援があれば成立し、利用者に必ずリターンが届く「All in型」（即時支援型）のプロジェクトで、輸入貿易事業などを行うアスタイルが2018年6月から支援を募り、目標金額の50万円を大きく上回る547万6950円を、337人の支援者から調達していた。 製品の発送はもともと18年11月末の予定だったが、アスタイルは11月13日にMakuake上で「生産は完了しているが、Bluetooth認証の取得に時間がかかっている」として発送の延期を告知。12月に入ると「間もなく認証登録が完了する」と案内し、同月18日に「年明けの便で
あなたのデータを守るために
メディア関係者向けお問い合わせ先 メールでのお問い合わせ: pr-jp@google.com メディア関係者以外からのお問い合わせにはお答えいたしかねます。 その他すべてのお問い合わせにつきましては、ヘルプセンターをご覧ください。
「けものフレンズ２」は間違いなく「けものフレンズ」だということ。 - けものつれづれ
アニメ「けものフレンズ２」 その5話、6話はけものフレンズのファンから相当な物議を醸した。 「かばん」が「サーバルと何らかの理由で別れ、今はコノハ博士とミミちゃん助手と共に、研究室でサンドスターの研究をしている事。 サーバルはかばんの事をほとんど忘れてしまっているということ。 一期ファンにはそうやすやすとは受け入れられない内容。当然、私のタイムラインは阿鼻叫喚の嵐であった。 しかしながら、私はこの展開に既視感があった。 それは間違いなく前作でも行われていた事。 殆どの人は気づかなかっただけで、確かに前作でもこれに準ずる内容があったのだ。 それを知るには、けものフレンズの”真の原点”である、スマホゲームアプリ「けものフレンズ」まで遡る必要がある。 アプリ「けものフレンズ」 gamebiz.jp アプリ「けものフレンズ」(以下”アプリ版”)2015年3月16日にサービスを開始したこのゲームの擁
日本は統計が不正確だったから敗けたのではなく、現実を直視できなかったから敗けた - 読む・考える・書く
安倍政権の統計不正問題にからんで、敗戦後に吉田茂がマッカーサーに語ったという、あるエピソードが話題になっている。 日本経済新聞「春秋」（1/19）： 終戦直後、吉田茂は「餓死者が大勢出る」と連合国軍総司令部（GHQ）のマッカーサーに訴え、米国から大量の食料を送らせた。だがそんな状況にはならない。日本の統計はでたらめだと詰め寄られるや、「日本の統計が正確だったら、米国と戦争などしていない」。 ▼ユーモアを武器に、和製チャーチルと評された元首相の面目躍如たるエピソードだ。（略） 仮に吉田茂がこう語ったのが事実だとしても、戦前の日本の統計がデタラメだったというのは事実ではない。実際、対米開戦前には「内閣総力戦研究所」が統計その他のデータをもとに対米戦争のシミュレーションを行い、日本は必ず負けるという正確な結論を出していた。 対米戦争になったらどうなるか？というシミュレーションは内閣総力戦研究所と
「この3つの中だったらどの家に住みたい？」圧倒的な差がつく結果に
よんてんごP @yontengoP どうしても数字でしか見れないので 築年数と広さと値段で見てしまうのだけども 結構リプ欄だと「いや風呂場の着替えスペースが少ないぞ」とか 「建築材質的にこれはアカン」とか色んな角度から見てる方がいるんだなあと思って 2019-02-21 00:53:43
防音性の高い賃貸探しってどうやったらいいの？
周りの騒音が嫌で防音性の高い物件を探してる。場所は都内。間取り25〜30㎡で。 他にも希望条件はたくさんあるけど、それでも物件はある。しかし、防音性は不明。 鉄筋コンは防音性高いってよく言うけど、いまいち信用できない。 前住んでた鉄筋コンは壁がめちゃくちゃ薄くて、そもそも片方の壁はコンクリ入ってない感じだった。コンクリ入ってそうな方もかなり薄い。ただここは築50年オーバーだったから、そのせいかと思ってた。 そしたら大工経験のある人から「1kとか1dkだと鉄筋コン造でも片方の壁はコンクリ入ってないことが殆ど」って言われた。まじかよ。 ラシクラスみたいな防音マンションも考えたんだけど、予算的に厳しい。予算オーケーでも高い割にめちゃくちゃ狭いし北向きなのも気が進まないポイントではある。 角部屋で片側の壁に遮音シートとか貼ればいいのか、築浅にすればいいのか、二桁万ぐらいだせばいいのか、それとも他に
統計不正で新たに「官邸関係者」明記の圧力メールが発覚！ 安倍首相「いったん戻れ」の理由はこれだったのか - 本と雑誌のニュースサイト／リテラ
統計不正で新たに「官邸関係者」明記の圧力メールが発覚！ 安倍首相「いったん戻れ」の理由はこれだったのか 圧力があった──そのことを証明する、決定的な証拠が出てきた。 それは、「毎月勤労統計の改善に関する検討会」（以下、検討会）で座長を務める中央大学・阿部正浩教授に対し、厚労省の手計高志統計情報部雇用・賃金福祉統計課長補佐（当時）が2015年9月14日の16時8分に送ったメール。国会では野党が何度もメールを公開せよと迫ってきたが、安倍政権はこれをひた隠しに。それがようやく衆院予算委員会の理事会でメールが公開されたのだ。 無論、安倍政権が積極的に開示したわけではなく、立憲民主党・逢坂誠二議員の説明によれば、阿部座長自らがこのメールを厚労省に転送したのだという。阿部座長がわざわざ転送しなければ、安倍政権は隠しつづけるつもりだったのだろう。 しかも、阿部座長に送られたこのメールに綴られていたのは、
厚労省、官邸関係者に説明と記載 メール公開、勤労統計の調査変更 ｜ 共同通信
衆院予算委で答弁する厚労省の姉崎猛元統計情報部長（右手前）を見つめる（奥左端から）厚労省の藤沢勝博政策統括官、定塚由美子官房長、中江元哉・元首相秘書官＝22日午前 毎月勤労統計の調査対象事業所の入れ替え方法変更を巡り、厚生労働省は22日、姉崎猛・元統計情報部長が中江元哉・元首相秘書官と面会した2015年9月、同省担当者が有識者検討会の阿部正浩座長へ送った複数のメールを公開した。面会10日前の9月4日のメールには「検討結果を官邸関係者に説明している段階だ」との記載があった。野党は「官邸と日常的にやりとりしていた」とみて攻勢を強める構えだ。 野党は「9月4日メールの官邸関係者が誰なのか」と追及したが、厚労省の担当者は「確認できていない」と釈明した。この前日の同3日に安倍晋三首相が中江氏から調査方法の説明を受けていた。
日本人が大好きな｢安すぎる外食｣が国を滅ぼす
コンテンツブロックが有効であることを検知しました。 このサイトを利用するには、コンテンツブロック機能（広告ブロック機能を持つ拡張機能等）を無効にしてページを再読み込みしてください。 ✕
「えげつない」 Amazon、1％ポイント付与を“強制” 出品者が費用負担、批判相次ぐ - ITmedia NEWS
「えげつない」ーーAmazon.co.jpがこのほど「Amazonポイント」の制度を変更すると発表し、出品者の間でそんな声が上がっている。5月23日以降、Amazon直販商品、出品者からの商品を問わず、購入者に対し、販売価格の最低1％のポイントを付与するよう変える予定だ。購入者にとってはメリットがあるが、出品商品のポイントの費用は「出品者の負担になる」といい、出品者からは戸惑いの声が出ている。 5月23日以降、Amazon.co.jpの全商品を対象に、ポイント付与率を1％にするという。Amazon.co.jpの出品者向けポータル「セラーセントラル」で2月20日に発表した 2月22日現在、Amazonポイント規約は、「出品者が定める付与数または付与率に従い付与される」となっている。しかし5月23日以降は全ての商品に価格の1％分のポイント付与が必須となる。導入から2週間後の6月3日時点で、付与
DMM亀山会長「クビになっても食っていけるなら、会社で言いたいことが言えるようになる」 いつでも転職できる状態に身を置くことの意味
教育の問題は、中高で8割を占めている 亀山：小中学生は、今から学校がいろいろやってくれるから違ってくるかもしれないけれど、今の彼ら（会場のみなさん）は、ちゃんといい子が90点。そっちのほうができているんですよね。だからこれからは、どちらかというと藤原さんの言っていたような能力を中心にやってもいい。もう90点は取っているからね。 藤原：そうなんです。だからそこは高校に期待なんですよ。僕は世界を見ているから、日本の小学校はいろいろ批判もされていますけれど、とくに低学年については相当うまくやっているんですよ。幼児教育もそんなに問題はないんです。とにかく問題は中学校からで、3割ぐらいは中学校の問題。半分ぐらいは高校の問題です。 普通高校は本当に必要なのか？ という疑問があるんですよ。普通高校から普通大学に入って普通の会社に入っても、ホワイトカラーの事務業務は10年から20年でなくなってしまいます。
絶滅したはずのゾウガメ ガラパゴスで１世紀ぶり発見 | NHKニュース
南米エクアドルのガラパゴス諸島で、絶滅したと考えられていたゾウガメの一種が、およそ１世紀ぶりに見つかり、島では、ほかにも生息している個体がいないか調査が進められています。 このゾウガメは、1906年を最後に姿が確認されておらず、その後、島でたびたび火山の噴火が起きたこともあって絶滅したと考えられていました。 発表によりますと、見つかったのはメスで、年齢は100歳前後と、平均寿命とされる60歳を大幅に上回っているとみられるということです。 島の別の場所では、ゾウガメとみられる足跡やふんが複数見つかっているということで、ほかにも個体がいないか調査が進められています。 ガラパゴス諸島の環境保全に携わる研究者は、「ガラパゴスにとって今世紀で最も重要な発見だ。絶滅の危機にひんした固有種の繁殖に努めたい」と話しています。
「プレミアムフライデー」開始から２年 働き方改革と連動課題 | NHKニュース
月末の金曜日に早めの退勤を促して、消費などにつなげようという「プレミアムフライデー」は開始から２年となります。しかし、依然として定着が進んでいないのが実情で、４月から始まる有給休暇の取得義務づけなど働き方改革に合わせて浸透を図れるかが課題となっています。 しかし、依然として定着が進んでいないのが実情で、官民の推進協議会の調査では、月末の金曜日に通常よりも早く退勤した人の割合は２年間の平均で11％にとどまっています。 このため協議会は、大学と連携して社会人向けの講座を開くなど、趣味をきっかけに早めの退勤を促すことや、あまり進んでいない地方での啓発イベントに力を入れる考えです。 また、４月からは、働き方改革関連法が施行され、有給休暇を最低でも年５日取得するよう義務づけられることから、協議会は「月末の金曜日の午後に休暇を取る」などの動きにも結び付けたい考えで、働き方改革に合わせて浸透を図れるかが
【本感想】年収150万円で僕らは自由に生きていく 答え合わせは5年後は本当だった - ドクダミ自由帳
こんにちは、ドクダミ淑子です。 先日、思うところがあって、この本を買いました。 年収150万円で僕らは自由に生きていく （星海社新書） [ イケダ ハヤト ] 価格：885円（税込、送料無料) (2019/2/21時点) 楽天で購入 ネットの一部分だけで悪い意味で有名になっている人の、2012年11月に発売された新書です。 これがなかなか面白かったので、今回は感想を書いていこうと思います。 どんな本なの？ こちらはイケダハヤト（通称イケハヤ）氏が書いた、新書というよりもエッセイみたいな本です。 各章のまとめだけ抜粋して書くと、こんな感じ。 「貧乏」をクリエイティブに楽しもう 盲目的にお金を稼ぐのではなく、必要な分だけ稼ぎ、余剰な時間を生み出すという考え方になろう 自分の職能の収益性を高めよう。今の会社でしか通用しないスキルを長時間かけて磨かないようにしよう お金がないと何もできないというの
開発・運用本部向け新人研修2018の講義資料を公開しました - Cybozu Inside Out | サイボウズエンジニアのブログ
こんにちは。そろそろプロ野球シーズンの開幕が待ちきれなくなってきたコネクト支援チーム*1の酒井（@sakay_y）です。 サイボウズでは、新入社員全体研修の後に、開発系の新入社員に対して1ヶ月程度の開発研修をおこなっています*2。内容は、毎年改善を重ねていますが、基本的には講義＋実習です。本記事では、先日公開した2018年の研修の講義資料を、全体の流れに沿って紹介したいと思います。 開発・運用研修について 本研修は「開発本部・運用本部に配属される新入社員が、部署配属後に必要となる基礎的な知識/技術/ツールを学び、体験できる。」ことを目的にしています。 新入社員3〜4名を1チームとして、そこに担当のメンターが1名付いて研修を進めていきました。講義では先輩社員に講師をお願いし、開発演習では各チームにメンターとは別の先輩社員が担当スクラムマスター（！）として付きました。 スケジュール 7/2 〜
ユーザーを泥棒あつかいした産業は、歴史的に沈んでいった｜深津 貴之 (fladdict)
2月13日の文化庁の文化審議会著作権分科会での、ダウンロード違法化に反対する声明です。海賊版対策に、ダウンロードを違法化の対象を超拡大するというのは、害のほうが大きすぎるという意思表明です。 本来なら、こういう政治的なゴタゴタには、スタートアップは近づきたくありません。ですが、noteは「だれもが創作をはじめ、続けられるようにすること」を標榜しています。クリエイターに不利益をもたらしかねない政治的アクションには、しっかりと意見を表明すべきだと考えました。 これはnote設立から続く、CEOである加藤の強い思いでもあります。 著作権法は、基本的には「表現の自由」の限定例外事項にとどめるべきかと思います。なぜなら簡単に拡大解釈できる上に、強すぎる法律だからです。特定の表現を、個人あるいは企業が申請なしに100〜120年も占有できる権利というのは、控えめに言っても強すぎる権利です。 クリエイター
出版社幹部「こんなことまで望んでなかった」 ＤＬ規制：朝日新聞デジタル
権利者の許可なくインターネットに上げられたと知りながら、著作権を侵害している漫画や写真、論文などをダウンロードすることを全面的に違法とする法改正案を２２日午前、自民党部会が了承した。市民の日常的なネット利用が萎縮することなどを懸念し、著作権の専門家などから異論が噴出。ＳＮＳ上でも疑問の声が渦巻くなか、議論の舞台は国会に移る。なぜ、誰がこの法改正を望んだのか。 「（海賊版）対策として、やれることは何でもやってほしいというのが我々の要望するところだが、『悪質なものに対して』というのが大前提だ」 出版大手・講談社の野間省伸社長が２１日、決算報告会でこの問題に言及した。法改正によって、表現の自由と作者の創作意欲が阻害されることがあってはならないとして「違法化のためのハードルはあればあるほど良いと思っている」と述べた。違法となる行為の範囲が広がりすぎることに懸念を示した形の発言だ。 だが、漫画の海賊
低遅延なボイスチェンジャー「Gachikoe!」が配布開始！無料配布あり、Win/Macに対応
低遅延なボイスチェンジャー「Gachikoe!」が配布開始！無料配布あり、Win/Macに対応 PC向けボイスチェンジソフト「Gachikoe! Core (ガチコエ! Core) v0.0.0」の配布が開始されました。同ソフトは作者の桜音さちさんが現在開発中の「Gachikoe!」 のコア機能を抽出したバージョンで、WindowsとMacに対応しています。バージョンv0.0.0は作者のBOOTHで無料配布されています。BOOTHはこちら。 Gachikoe! (ガチコエ!)っていう低遅延でクロスプラットフォーム(Win、Mac対応)なボイチェンつくりました！ 無料配布もあるのでよかったら試してみてください✨✨✨https://t.co/BClIcqadX4 PIXIV FANBOXもはじめたのでよかったら支援していただけると嬉しいです！https://t.co/F0Rc6v4YCT pi
夏野 剛 Takeshi Natsuno on Twitter: "最近スマホの名義替えしたので請求書を紙で届くようにしたら、こんなの発見。76歳の母になんてひどい押し売りしてるんだろう。いくら本人同意とはいえ総務省はこういうのをやめさせるべきじゃないのか。もちろん母は契約時のショップ店員トークを… https://t.co/TNtpYNKgIH"
最近スマホの名義替えしたので請求書を紙で届くようにしたら、こんなの発見。76歳の母になんてひどい押し売りしてるんだろう。いくら本人同意とはいえ総務省はこういうのをやめさせるべきじゃないのか。もちろん母は契約時のショップ店員トークを… https://t.co/TNtpYNKgIH
囲碁AIブームに乗って、若手棋士の間で「AWS」が大流行 その理由とは？
囲碁AIブームに乗って、若手棋士の間で「AWS」が大流行 その理由とは？：週末エンプラこぼれ話（1/4 ページ） 人間の能力をAIが完全に上回りつつある「囲碁」の世界。最近では、AIを活用した研究を行う棋士も増えているそうだが、その裏側でAWSが若手棋士の中で大流行しているという。一体何が起こっているのだろうか。 ここ数年、将棋や囲碁といったボードゲームの世界では、AI（人工知能）の能力が人間を上回りつつある。特に、Alphabet傘下のDeepMindが開発した囲碁AI「AlphaGo」は、世界のトップ棋士を次々と破ったことで、昨今の人工知能ブームの“火付け役”となったのは記憶に新しい。 最近では、プロ棋士たちも研究にAIを使い始めているが、その影響で、若い囲碁棋士たちの間で今「AWS（Amazon Web Services）」を利用する人が急速に増えているのだという。一体何が起きている
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
IT大手のリストラ組 人手不足でも転職難しい？ - 日本経済新聞
料理の手順がフローチャートになって紹介されている本『理系の料理』がわかりやすい！「適量ってどのくらいだよっていつも思うからこれほしい」
「わかりる？」は誤植？ 石ノ森章太郎『幻魔大戦』復刻作業で若いスタッフからの指摘に「昔は使ってた」証言が次々集まる