DMMにおけるユーザーレビュー基盤の変革(心理的安全性を高めるワークショップを行いました) - DMM inside｜DMM inside
機械学習のデータ前処理備忘録 - Qiita
1.はじめに 前回の記事で機械学習は「データ前処理が8割」と書きました。 今回はそのデータ前処理として私が実施していることを備忘録として書いておきます。 まだまだ至らない点等あるかと思いますので、間違いなどご指摘いただけると幸いです。 2.前処理の必要性 まず、全体像から把握しておくことが大切なので、 機械学習の全体像で見た前処理の立ち位置を以下図に示します。 図.機械学習の全体像から見た前処理の立ち位置 前処理が必要な理由は以下のようなことが挙げられます。 ・機械学習のモデルは文字列データではなく数値データで渡す必要があるため ・上記同様、欠損値(null)があるデータも変換しないと機械学習のモデルに渡せないため ・精度を向上させるため ・リーケージの発生を防ぐため etc... 3.前処理の具体例 前処理は具体的に以下のようなことを実施します。 ・カテゴリーデータの処理 ・欠損値処理
機械学習初心者の私に告ぐ「4つの忠告」
1.はじめに 業務で機械学習を使用することが決まり、約3ヶ月前から機械学習の勉強を始めました。 私自身理系大学出身であったため、数式も多少調べればわかるだろう程度に考えていました。 しかし、勉強すればするほど自分の考えが甘かったことに気づきました。 この記事では、当時私が実際にやってしまっていた思い込みへの忠告を書いていきます。 これから機械学習の勉強を始める方々の参考になれば幸いです。 2.4つの忠告 以下4つが機械学習初心者の頃の私へ送る忠告です。 ・ディープラーニングだけじゃ機械学習は網羅できない ・学習モデルのことだけではなく、全体像を見る必要がある。 ・データ前処理はすぐには終わらない。むしろ機械学習は前処理が8割。 ・評価方法は正解率だけではない。 それぞれ詳細について書いていきます。 2-1.ディープラーニングだけじゃ機械学習は網羅できない 機械学習＝ディープラーニングという
人気のPythonで深層学習を始めたい！ 『現場で使える！Python深層学習入門』発売
深層学習を利用するための言語として人気の高いPython。翔泳社ではPythonと深層学習を基礎から習得できる『現場で使える！Python深層学習入門』を6月20日に発売しました。Pythonから学びたい、Pythonで深層学習のモデルを構築してみたい、そんな方におすすめです。 『現場で使える！Python深層学習入門 Pythonの基本から深層学習の実践手法まで』は、Pythonの利用経験のない方がその文法から学べ、深層学習のモデル構築できるようになるまでをサポートする入門書です。 Pythonといえば深層学習（機械学習）というイメージも強くなってきましたが、実際にライブラリは充実し使いやすくなってきています。本書ではプログラミング学習サービスを提供するアイデミーの技術顧問、木村優志さんが筆を執り、Pythonと関連するライブラリの使い方を解説しています。 「Part1 Python入門
Web クリッパー: ウェブの閲覧をもっと快適に
お気に入りのページを保存して簡単にアクセス 現在インターネット上に存在するウェブサイトの数は 14 億以上。さらに毎日 14 万ずつ増え続けており、Google が毎日処理する検索の数は 55 億件にものぼります。つまりはネット上に膨大な数のウェブサイトが存在し、事実 Google では検索のたびに何百万もの結果が返されています。 こうした状況で適切な情報を見つけるのは簡単ではなく、一旦見つけたらしっかり保存しておくのが得策です。そのためにブックマークがあるんじゃないか、とおっしゃる方もいらっしゃるかもしれません。しかし、果たしてブックマークで十分でしょうか？ たとえば何ヶ月も前に Google 画像検索で見つけた写真や、ニューヨーク・タイムズ紙の長文記事の中にある一段落だけを保存したいとき、あるいは Amazon で見つけたセール情報を保存したい場合、ブックマークでは不十分です。さらに、
【連載 オーディオプレイヤーマスターへの道】第63回 NW-A50シリーズの巻
こんにちは！ 秋葉原店のきーちゃん@eear_kiichan です。 本日最初の１枚はこちら！ 令和元日、亀戸天神宮に行きました！藤の花がとっても素敵でした。 元号も変わったという事で気持ちも新たに、何事も頑張っていきましょう！ さて、本題はこちらです↓ 本日ご紹介するのは・・・ ■メーカー製品情報はコチラ 2018年10月に発売され、現在ウォークマンのAシリーズの中では最新機種となっているNW-A50シリーズ！ 種類やカラバリも豊富でどれを購入しようか選ぶのもワクワクしますね。 気になるカラーはありますか？ 今回はA55 GM【ホライズングリーン】を撮影しながら、NW-A50シリーズの魅力に迫ります！ 私が思う、 NW-A50シリーズの魅力はこちらの3点！ ①まずは聴いてみて！パワーアップした音質！ ②音質補正機能の充実！自分好みの”イイ音”に！ ③コンパクトで携帯性抜群！ これまで
楽しく読める！お金の基礎知識おすすめ本｜深津 貴之 (fladdict)
年金とか投資とかに怯えず、この先生きのこるための基礎知識オススメ本。専門知識なしに読めるやつ集めました。恐怖や不安の根源は「知らないこと」。まずは知識を得ることが大事。知識があれば、無用な恐怖や不安は減り、すべき行動が見えてくる。 経済政策はお金を配ることも大事だけど、知識と教育を配ることが一番大事だと思う。以下、自分が読んだ中から、とっかかりとしてオススメできそうな本のまとめ。 普通に、上から順番に読んでいくと楽しいかも 父が娘に語る 美しく、深く、壮大で、とんでもなくわかりやすい経済の話。 ギリシャの財務大臣が、10代の娘のために作った本。経済破綻中のギリシャは財務大臣がダメな人なのかなぁ…と思ったら、むっちゃ知性的な人でした。読み物として面白く、経済をからめた世界の仕組みがわかります。
【SAFE LISTENING】耳を『守る』【フェスやライブに必須な持ち物】
こんにちは！！名古屋大須店のまっきーです！！ もう日中は夏！！夏！！夏ッーーーー！！！ って感じでとても暑くなってきましたね！『夏』と言えばそう 『フェス』の季節到来です！！！！！ そんなフェスやライブに行かれた際に耳が『キーン』ってなった事ありませんか？？ それもしかすると・・・ 【急性音響性難聴】 かもしれません！ ■急性音響性難聴とは・・・？ 強大な音にさらされることによっておこる難聴で、内耳の障害によるものです。 フェスやコンサートに行った直後から、耳のふさがったような感じや、難聴、耳鳴り（キーンあるいはピー）がするといった症状が出ます。 帰宅までに治ることもありますが、翌朝になっても消えないこともあります。通常、耳の痛みやめまいを伴うことはありません。 皆さん音楽大好きですよね？ e☆音（良い音）で大好きな音楽をずっと聞く為に今日は皆さんに耳を『守る』をテーマにお話していきます！
人を震えさせるツール｢Dockle｣の仕組みを解説〜Dockerセキュリティの基礎知識も一緒に - Qiita
はじめに ｢3分でできる！最高のDockerfileを書いたあとにやるべき1つのこと｣で告知したVuls祭り #5で、コンテナのセキュリティについてお話ししました。 しかし15分程度の時間だと、説明不足な点もあったので、資料を修正しつつ、補足コメントを入れました。 パートごとにタイトルを付けたので、Qiitaの目次を参考にするとわかりやすいと思います。Dockerイメージの簡単な説明 & Dockle内部でやっていることの解説 が本記事のメインパートです。 参考になったら、Vuls/Dockle/Trivyのスターお願いします! 特にDockleは後発でスター数が少なく、まずはスター1Kを目指してます。 Vuls Dockle Trivy なお、タイトルの元ネタはこちらです。震えてくださってありがとうございます。 @nagashi_ma_w 2019.6.20: いくつかスライドを削除し、
映画「キングスマン」にみる現代的スパイと認証のたしなみ
この記事は認証セキュリティ情報サイト「せぐなべ」に掲載された「架空世界 認証セキュリティセミナー 第17回『現代的スパイと認証の嗜み【キングスマン】」（2018年3月8日掲載）を、ITmedia NEWS編集部で一部編集し、転載したものです。当時未発売だった製品やサービスの記述などは、本記事掲載時の状況に合わせて編集しています。 「007」を強烈に意識したブッ飛びスパイ映画 ……それでは講義を始める。 前回は「カードキャプターさくら」などを題材に、魔法少女と認証をこじつけ……いや、解明する試みを行った。いかがだっただろうか。 一概に魔法少女といっても、夢と希望で魔法を使うものから、理屈とロジックで戦う少女までいることが分かったと思う。諸君らの好きな魔法少女がどのような認証を使っているのか、あるいは認証などぶっ飛ばしているのかを報告してくれるとうれしい。 さて、今回はあの大ヒットスパイ映画を
アニメ「BEATLESS」で味わう“認証とシンギュラリティ”
この記事は認証セキュリティ情報サイト「せぐなべ」に掲載された「架空世界 認証セキュリティセミナー 第18回『認証と技術的特異点（シンギュラリティ）【BEATLESS】」（2018年3月22日掲載）を、ITmedia NEWS編集部で一部編集し、転載したものです。当時未発売だった製品やサービスの記述などは、本記事掲載時の状況に合わせて編集しています。 SFアニメ「BEATLESS」 ……それでは講義を始める。 前回は映画「キングスマン」「キングスマン：ゴールデンサークル」に登場する認証を紹介した。いかがだっただろうか。 「掌紋認証」という生体認証や、スパイや敵役ならではの認証を紹介した。未見の方も興味が出たのではないかと思う。 さて今回はテレビアニメ「BEATLESS」を題材に、認証と「技術的特異点」（シンギュラリティ）について話をしたいと思う。 「その笑顔を僕は信じる。君に魂がなかったとし
これが本当なら「現代の特高」…前川元次官が語る告発ノベル「官邸ポリス」のリアル | 毎日新聞
インタビューに答える元文部科学事務次官の前川喜平・現代教育行政研究会代表＝東京都目黒区で2019年5月22日、藤井太郎撮影 元警察庁キャリア官僚がペンネームで書いた告発ノベルとされる「官邸ポリス」（講談社）が「リアルだ」と、霞が関で話題という。その中に出てくる文部科学省の「前田事務次官」は、警察出身の内閣官房副長官の指示で尾行され、弱みを握られる。これが現実なら、日本の「警察国家化」は相当進んでいることになる。「前田次官」のモデルが加計学園問題で安倍晋三首相に不利な証言をした前川喜平・元文科事務次官（64）なのは明らかだ。最近、「思うところあり」として本名でのツイートを始めた前川さんに本の感想を聞き、自身の体験を振り返ってもらった。【大場伸也/統合デジタル取材センター】
インシデントレスポンス初動対応時のデータ収集ツール - setodaNote
2023-01-10 データ収集ツール インシデントレスポンスの初動対応で端末からデータを取得するのに利用できそうなツールをいくつか試してみました。 主にファイルダンプ取得を目的として、ぱっとそのまま使えるものをという観点でいくつかの機能を確認し、結果を表にまとめました。（※1、※2、※6） 実行結果（Windows 環境で確認） # 名称 対応OS $MFT $UsnJrnl $LogFile Evtx Registry Prefetch Browser History Memory Dump Report 配布場所 1 CDIR Collector Windows OK OK - OK OK (+.log) OK IE/Edge, Chrome, Firefox OK Log 公式サイト 2 CyLR Windows, Mac, Linux OK OK OK OK OK (+.log)
絵心ゼロでもこのレベルよ。ラクガキからリアル画像を生成する｢GauGAN｣が今すぐ試せます
絵心ゼロでもこのレベルよ。ラクガキからリアル画像を生成する｢GauGAN｣が今すぐ試せます2019.06.19 23:0027,073 小暮ひさのり ね？簡単でしょ？ 以前こちらの記事で紹介した、NVIDIAのAIアルゴリズムの一種である、敵対的生成ネットワーク（GANs）という技術を利用した自動描き起こしツール｢GauGAN｣。 以前は動画でのデモに留まっていましたが、現在はWebサイト上でその機能を試せるようになっています。 Image: NVIDIA ResearchImage: NVIDIA Research絵心ゼロで美術1の僕が20秒で描いた作品がこちらです。よーく見るとアナザー地球のようなファンタジーでいびつなパーツもありますけど、これが一瞬にして生成されるって、魔法じみていてもはや驚きしかありません。 画伯、って読んでくれてもいいのよ？ Source: NVIDIA
環境構築から分析まで10分、「Pythonで機械学習」の手軽さに驚いた
Pythonで機械学習を使ったデータ分析作業を始めるのは簡単。無料で利用できるオープンソースの開発環境があるからだ。代表的なものには、米グーグル（Google）が提供する「Google Colaboratory（グーグル・コラボレートリー）」が挙げられる。 これは、グーグルの仮想マシン上でJupyter Notebookを使える開発環境だ。Jupyter Notebookは、Pythonプログラムを対話形式で開発できるツールである。 Google Colaboratoryは定番ライブラリーが使える状態で提供されているので、Pythonライブラリーを使って分析／機械学習を学ぶといった用途には最適だろう。Googleアカウントがあれば利用できるのも大きなメリットだ。そこで筆者もプログラムを実際に記述してみることにした。 scikit-learnでモデル作成 作成したプログラムは線形回帰分析のプ
データ分析者の最重要使命とは？「Kaggle」元世界チャンプの意外な答え
「問題を解決するために、統計やソフトウエア開発・プログラミング、ビジネス問題解決、ソフトウエアツールの活用などの知識やスキルを統合活用する。これがデータサイエンティストに関する古典的な定義だ。だが、非常に大切なのに無視されがちな役割がある」。 こう指摘するのは、データサイエンティストのセルゲイ・ユルゲンソン（Sergey Yurgenson）氏である。機械学習自動化ツールを提供する米データロボット（DataRobot）のアドバンスドデータサイエンスサービス ディレクターとして、顧客の問題解決を手掛ける傍ら、後進の指導を務めている。 データサイエンティストは世界中に数えきれないほど存在する。データサイエンス／機械学習関連のコンペティションとして知られる「Kaggle」には11万2607人が登録されている（2019年6月14日時点）。どのような人材までをデータサイエンティストと呼ぶかにもよるが
ピザの写真だけで作り方を学習するAI、MITが発表
ニューラルネットワークが究極のピザを生み出す可能性があることが、最近の研究で示唆された。このマサチューセッツ工科大学（MIT）の研究（6月に入ってArxiv.orgで発表された）では、ピザの写真を見るだけでピザの作り方を学習できる「PizzaGAN」というニューラルネットワークに焦点を当てている。 敵対的生成ネットワーク（GAN）はモデルを使用して決定を下す。PizzaGANプロジェクトの狙いは、「この段階的な手順を反映した生成モデルを構築することで、ピザの作り方を機械に教える」ことにある。 PizzaGANは、それぞれ1つのピザが写った9213枚の画像（Instagramからダウンロードしたもの）を含むデータセットを使用する。各画像には、トッピングを説明する一連のラベルが割り当てられているが、生地、ソース、チーズの説明は含まれていない。12種類のピザトッピング（ルッコラ、ベーコン、ブロッ
ARプロダクト開発に必要なことを語ろう――AR Developer Meetup #2 レポート
5月10日、ARアプリ開発者向けの勉強を目的としたミートアップ「AR Developer Meetup #2」が開催された。プレゼンセッションでは、ARの有識者たち5名が開発にまつわるエピソードを披露。参加者にとって学びの多いイベントとなった。ここでは、そのレポートをお届けする。 「どんな体験をユーザーに提供したいか？」を徹底的に考える ――MESON 比留間和也氏 まずは、株式会社MESONのXRエンジニア／Unityエンジニアである比留間和也氏が登壇。開発に携わった、ARランウェイ「OnwardPortal」と2030年の神戸を作る体験型ARコンテンツ「AR City in Kobe」において大切にした点を解説した。 株式会社MESON 比留間和也氏 特定の場所のみで利用できるARコンテンツは「その場限りの、たった一度の体験であること」が大きな特徴だ。そのため、「ユーザーに最高の体験を
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
「テキストマイニング」を学びたいあなたにチェックしてほしい良書、１２冊はこちらです
https://codeday.me/jp/qa/20190202/198723.html