「未経験文系から3ヶ月でデータサイエンティストになって一発逆転」はここで終わり (2020/7/31 更新) - todo-mentor’s diary
データサイエンティストを生業にする手段と実態について述べる。 途中、具体例・境界値の例として私個人の話もするが、なるべく一般性のある話をする。 この記事で言いたいことは具体的には4つだ。 プログラミングスクールをディスるなら代わりの入門方法を提供しようよ。 もう「未経験文系から3ヶ月でデータサイエンティストで一発逆転物語」を止めろ。*1 おじさんは人生逆転したいなら真面目にやれ。 若者はワンチャンじゃなくて、ちゃんと化け物になれよ。 この記事についてはパブリック・ドメインとして転載・改変・リンク記載を自由にしてよいです。 (続き書いた) a. 入門は辛いが… b. 思考停止でプログラミングスクールに通うな。 なろう系・始めてみよう系資料一覧 （最速・最短ルート用） まずは動かしてみよう。強くてニューゲームが体験出来るぞ！ 入門以前の本 一般向け業界本 (AI業界と展望がわかる本) 技術者入
Scientific Reportsという論文誌に"Japanese conservative messages propagate to moderate users better than their liberal counterparts on Twitter"という論文が掲載されました． 日本国内の話ですので，折角だから解説したいと思います． 今北産業安倍政権時代の安倍晋三元首相に関する1億2千万件以上の大量ツイートを分析した結果，保守派のツイートの方がリベラル派のツイートよりも穏健な中間層によく届いていることが明らかになりました． もうちょっと詳しく東京大学・豊橋技術科学大学・香港城市大学の国際共同研究グループは、1億2千万件を超える安倍元首相に関するツイート（「安倍」または「アベ」が含まれるツイート）を解析し，保守派のツイートの方がリベラル派のツイートよりも穏健な中間層によく
ツイッター上でウクライナ政府をネオナチ政権だと拡散しているのは誰か（鳥海不二夫） - エキスパート - Yahoo!ニュース
2022年2月24日にロシア軍がウクライナに侵攻しました． 3月7日現在いまだ侵攻は続いており，一般市民にも多くの死傷者が出ているということで早期の収束を願うばかりです． ロシア側はウクライナへの侵攻の正当性として，ウクライナ政権はネオナチ政権であるという主張をしているようです． プーチン氏は安全保障会議で「我々はまさにネオナチと戦っている」と述べ、ウクライナ政府側をネオナチ扱いした。 https://mainichi.jp/articles/20220304/k00/00m/030/061000c 日本のマスメディアでこの主張を入れているところはあまりないようですが，ソーシャルメディア上ではこの主張に沿ってロシアの侵攻を正当化しているグループもあるようです． ロシアによるウクライナ侵攻について、日本では「単なる思い込みによる誤解」から「めちゃめちゃな陰謀論」まで、ツイッターのみならず、ウ
【JS/ Python両方OK!】「データ可視化」が歴史から実装まで体系的に学べるStanford講座の独習ノート - Qiita
【JS/ Python両方OK!】「データ可視化」が歴史から実装まで体系的に学べるStanford講座の独習ノートJavaScriptd3.jsデータ分析データサイエンスcolaboratory CS 448B Visualization (2020 Winter)は、Maneesh Agrawala氏による、Stanford大で行われた、データの可視化に関する体系的な講義です。 スタンフォード大の"CS 448B Visualization (2020 Winter)" がすごい。 データ可視化の体系的講義。どう図表に変換するかの理論、探索的データ分析、ネットワーク分析等の実践と盛り沢山。 スライドに加え、Observable(JavaScript), Colab(Python)どちらでも例を試せる。https://t.co/lGyPElrihg pic.twitter.com/mWZn
2023年版：実務データ分析を手掛けるデータサイエンティスト向け推薦書籍リスト（初級6冊＋中級8冊＋テーマ別15冊） - 渋谷駅前で働くデータサイエンティストのブログ
(Image by wal_172619 from Pixabay) 去年で恒例の推薦書籍リストの更新は一旦終了したつもりだったんですが、記事を公開して以降に「これは新たにリスト入りさせないわけにはいかない！」という書籍が幾つも現れる事態になりましたので、前言撤回して今年も推薦書籍リストを公開しようと思います。 初級向け6冊 実務総論 データサイエンス総論 R・Pythonによるデータ分析プログラミング 統計学 機械学習 中級向け8冊 統計学 機械学習 テーマ別15冊 回帰モデル PRML 機械学習の実践 Deep Learning / NN 統計的因果推論 ベイズ統計学 時系列分析 グラフ・ネットワーク分析 データ基盤 コメントや補足説明など 完全なる余談 初級向け6冊 今回は新たに加わったテキストがあります。 実務総論 AI・データ分析プロジェクトのすべて[ビジネス力×技術力＝価値創出
実務の専門家として機械学習や統計分析を手掛けたい人にオススメの書籍初級5冊＆中級8冊＋テーマ別11冊（2020年2月版） - 渋谷駅前で働くデータサイエンティストのブログ
(Image by Pixabay) この記事は以下のオススメ書籍リスト記事のアップデートです。 毎回の断り書きで恐縮ですが、この記事では「データサイエンティストや機械学習エンジニアなどデータ分析の実務の専門家として」*1機械学習や統計分析を手掛けていきたいという、主に初級ないし中級ぐらいのスキルレベルの人たちにお薦めしたい書籍を、初級向け5冊・中級向け8冊及び細かいテーマ別に11冊、それぞれ挙げていきます。スタンスとしては相変わらず「当座の最終到達点を『中級』に置いた時に最初に読んで内容をマスターしておくべき書籍」を初級に置いているので、世の中のこの手のお薦め書籍リストに比べると若干ハードな内容のものが初級向けに多いかもしれません。 後はちょっと気が早いかもしれませんが、機械学習パートに関しては「AutoML時代にあっても実務の専門家であれば知っておくべき知識」を収めた書籍を選んでおきま
データサイエンティストは何を勉強すべきか：「教養」と「必須」と「差別化」と - 渋谷駅前で働くデータサイエンティストのブログ
(Image by Wokandapix from Pixabay) 個人的な観測範囲での話ですが、データサイエンティストという職業は「21世紀で最もセクシーな職業」として刹那的な注目を集めた第一次ブーム、人工知能ブームに煽られて火がついた第二次ブーム、そして「未経験から3ヶ月で人生逆転」ムーブメントと折からのDXブームに煽られる形で沸き起こった第三次ブームを経て、何だかんだで社会に定着してきた感があります。 で、このブログを始めた頃からの連綿と続くテーマになっていますが、いつの時代も話題になるのが「データサイエンティスト（になるに）は何を勉強すべきか」ということ。7年前から恒例にしてきた「スキル要件」記事では、基本的には「どれも必要な知識（学識）」であるという前提で分野・領域・項目を挙げてきました。少なくとも、最初の3回ぐらいはそういう認識でスキル要件記事を書いていた気がします。 ところ
LGのスマート洗濯機が、1日に3.6GBもの膨大なデータを通信をしていると報告するX(旧Twitter)の投稿が大きな話題となりました。 Homeowner Baffled After Washing Machine Uses 3.6GB of Internet Data a Day https://www.newsweek.com/homeowner-baffled-washing-machine-uses-3-6gb-internet-1862675 Your washing machine could be sending 3.7 GB of data a day — LG washing machine owner disconnected his device from Wi-Fi after noticing excessive outgoing daily data traf
中国で買ったAndroidスマホ、個人情報がダダ漏れだった……2023.03.03 19:30271,607 Lucas Ropek - Gizmodo US ［原文］ （ 禿頭帽子屋/Word Connection JAPAN ） 中国の国内で販売されているハイエンドのAndroidデバイスを使っていると、至るところで個人情報を抜き取られてしまう――そんな新しい研究結果が発表されました。 通知も同意もないままデータが収集され、ユーザーは常時トラッキングされたり、身元がたやすく明かされたりする恐れがあるとのこと。個人情報保護の点ではまるで悪夢のようだ、と指摘されています。 中国の人気メーカーが対象複数の大学のコンピューター科学者が発表した研究によると、この問題が明らかになったのは、XiaomiやOnePlus、Oppo Realmeなど中国で人気の高いスマホのメーカーすべて。それぞれのOS
中国で買ったAndroidスマホ、個人情報がダダ漏れだった…2024.05.12 16:35235,072 Lucas Ropek - Gizmodo US ［原文］ （ 禿頭帽子屋/Word Connection JAPAN ） 2023年3月3日の記事を編集して再掲載しています。 中国の国内で販売されているハイエンドのAndroidデバイスを使っていると、至るところで個人情報を抜き取られてしまう――そんな新しい研究結果が発表されました。 通知も同意もないままデータが収集され、ユーザーは常時トラッキングされたり、身元がたやすく明かされたりする恐れがあるとのこと。個人情報保護の点ではまるで悪夢のようだ、と指摘されています。 中国の人気メーカーが対象複数の大学のコンピューター科学者が発表した研究によると、この問題が明らかになったのは、XiaomiやOnePlus、Oppo Realmeなど中
2024年版：独断と偏見で選ぶ、データ分析職の方々にお薦めしたいホットトピックス＆定番の書籍リスト - 渋谷駅前で働くデータサイエンティストのブログ
毎年四の五の言いながら書いている推薦書籍リスト記事ですが、何だかんだで今年も書くことにしました。なお昨年度版の記事を上にリンクしておきましたので、以前のバージョンを読まれたい方はそちらをお読みください。 今回のバージョンでは、趣向をちょっと変えて「定番」と「注目分野」というように分けました。何故こうしたかというと、平たく言って 「初級＆中級向け」推薦書籍リストは定番化していて毎年あまり変更点がない 逆に直近のホットトピックスに関するテキストは毎年入れ替わりが激し過ぎて網羅しづらい という課題があり、特に2点目についてはあまりにもデータサイエンス関連書籍の新規刊行が多過ぎる＆僕自身がその流れについていけておらず完全に浦島太郎状態ですので、万人向けに等しくウケるようなリストを作るのは今回をもって完全に諦めたというのが実態です。 その上で、前回まで踏襲されていた定番書籍リストはバルクで提示すると
ネットワーク分析から直感的に理解するTransformerの仕組みと処理の流れ - あつまれ統計の森
グラフ理論と隣接行列 グラフ理論は点と線で物事を表す理論です。たとえば駅の路線図では下記のように駅を点、路線を線で表します。 東京メトロホームページより 上記の路線図では「駅と駅が隣接するかどうか」を中心に取り扱う一方で、それぞれの位置や方角などは厳密に再現はされません。このように、「隣接するかどうか」のみに着目して物事を表す際の理論を「グラフ理論」といいます。 グラフ理論では点をノード(node)、線をエッジ(edge)、全体をグラフ(graph)と定義します。数式で表すと$G = (V,E)$のように表しますが、$V$が頂点のVertice、$E$がEdge、$G$がGraphであるとそれぞれ解釈すると良いです。 グラフの表記法に関しては主に$2$通りあり、「①図を用いる」と「②隣接行列を用いる」をそれぞれ抑えておくと良いです。例があるとわかりやすいので下記のWikipediaの例を元
達人出版会
探検! Python Flask Robert Picard, 濱野 司(訳) BareMetalで遊ぶ Raspberry Pi 西永俊文 なるほどUnixプロセス ― Rubyで学ぶUnixの基礎 Jesse Storimer, 島田浩二(翻訳), 角谷信太郎(翻訳) 知る、読む、使う！ オープンソースライセンス 可知豊 きつねさんでもわかるLLVM 柏木餅子, 風薬 徹底攻略 AWS認定 クラウドプラクティショナー教科書 第2版［CLF-C02］対応 トレノケート株式会社 高山裕司 超楕円関数への招待 楕円関数の一般化とその応用 松谷 茂樹 手を動かしてわかるクリーンアーキテクチャ ヘキサゴナルアーキテクチャによるクリーンなアプリケーション開発 Tom Hombergs(著), 須田智之(訳) 詳解 AWS CloudFormation 潮村 哲 その決定に根拠はありますか？ 確率思
最終更新日： 2020年3月4日 AIの高まりとともにデータの大切さが再認識される今、オープンにさまざまなデータが公開され、気軽に活用できるようになっています。 オープンデータの存在は、膨大なデータから学習を行う機械学習にとって不可欠で、構築したいAIに合わせてオープンデータを選択し、活用することが必要です。 一方、オープンデータのみでは競合優位性のあるAIは構築できません。マクロなオープンデータと、独自に収集したミクロなデータを組み合わせて、独自のAIを構築していくことが重要です。 オープンデータを活用したサービスを構築する際には、サービスのUX（ユーザー体験）を高め、いかにユニークなデータを取得できるかが勝負なのでオープンデータに頼りすぎないようにしましょう。 今回、オープンデータ・データセットを6カテゴリに分類し、100個選出しました。自身のサービスやAIの構築に活かせそうなデータを
2021年版：データサイエンティストを初めとするデータ分析職向け推薦書籍リスト（初級5冊＋中級8冊＋テーマ別14冊） - 渋谷駅前で働くデータサイエンティストのブログ
(Image by Pexels from Pixabay) 今年も恒例の推薦書籍リストの季節がやって参りました。……なのですが、昨年はCOVID-19の影響で*1データ分析業界及び隣接分野の新刊書を読む機会が減ってしまいましたので、例年に比べてラインナップの変更をほとんど検討しないままでリストアップしている点、予めご容赦いただければと思います。 そして今回の記事では、これまで以上に「実務家向け」「実践的」であることを重視しています。そのため昨年までのリストに比べて大幅に刷新されているカテゴリもあったりします。また、末尾に僕なんぞが選ぶよりもずっと優れた推薦書籍リストへのリンクも付しておきました。併せて参考にしていただけると幸いです。 初級向け5冊 総論 統計学 機械学習 中級向け8冊 統計学 機械学習 テーマ別14冊 PRML 機械学習の実践 Deep Learning 統計的因果推論
森喜朗元首相の女性蔑視の価値観・言動が問題視され、五輪組織委の会長辞任のニュースが流れている時に、たまたま森功『同和と銀行』を読んでいた。森喜朗はこれに近いと考えると分かりやすいのかもしれない、とふと思った。 20年前に数々の舌禍で内閣支持率7％で退陣したのに、再び公的な要職に就けるのは何なんだろう。再びその言動が批判されても、理事会からは退任させられることもなく、「余人をもって代えがたい」と擁護される。 普通に考えれば「余人」は絶対にいる。もっと若くて能力が高く、価値観や言動もふさわしい人物は確実に存在する。本人の意思による辞任ではなく、理事会が解任することで「この組織の価値観ではない」と示した方が良いだろうと思える。しかし周囲は森喜朗を高く評価して固執しているように見える。そのズレがどうして生じるのか、と不思議な気持ちになっていた。 「調整力」「影響力」「人脈」などが評価されるのだとし
1. はじめに 地理情報システム (GIS) で、使用するデータとして「Shapefile 形式」でデータ提供されていることがあります。この記事では、この Shapefile が、どのような構造となっているのかについて、説明していきます。 1.1. トポロジ構造とは Shapefile について説明していく前に、まずは GIS データ等でよく利用される「トポロジ構造」について説明しておこうと思います。 例えば、トポロジ構造を持つファイルとして、次のようなものがあります。 .gdb: ESRIのファイルジオデータベースは、トポロジを含む複雑な空間データを格納することができます。 .topojson: トポロジを保存するための拡張 GeoJSON 形式で、隣接する地物間の境界を共有することでファイルサイズを削減します。 .gml: 地理マークアップ言語 (Geography Markup La
2023年版データ分析の100冊 が好評でしたので、2024年版を作りましたよ。 本記事のめあて IT系の技術者の方がデータ分析関連の仕事をするために役立つ本を紹介する（私が学び始めた時にあれば欣喜雀躍したであろう）記事として書いております 本記事作者の青木はバイオインフォマティクス（ゲノムデータのDB化中心・Perl・MySQL）からRで時系列分析→Pythonでデータ分析一般と業務をしてまいりました ですので研究者目的の本はありません。また、データ分析の基礎は主にRで学んだのですが、昨今の流行に合わせて理論のほかはPython本のみにしています 「本記事のR版のご要望があれば爆裂書きます！」と去年書いたのですが要望0 あはは、Rの本は今回撲滅しました！ こういうリストを挙げる奴は大抵読んでいない、と過去にも言われたのですが、未読本は削除しました 最近好著連発なので読んでいる途中だけど挙
達人出版会
探検! Python Flask Robert Picard, 濱野 司(訳) BareMetalで遊ぶ Raspberry Pi 西永俊文 なるほどUnixプロセス ― Rubyで学ぶUnixの基礎 Jesse Storimer, 島田浩二(翻訳), 角谷信太郎(翻訳) 知る、読む、使う！ オープンソースライセンス 可知豊 きつねさんでもわかるLLVM 柏木餅子, 風薬 デザインディレクション・ブック 橋本 陽夫 現場のプロがやさしく書いたWebサイトの分析・改善の教科書【改訂3版 GA4対応】 小川 卓 解釈可能なAI Ajay Thampi(著), 松田晃一(翻訳) PowerPoint 目指せ達人 基本&活用術 Office 2021 & Microsoft 365対応 PowerPoint基本＆活用術編集部 ランサムウェア対策 実践ガイド 田中啓介, 山重徹 TODによるサステナ
Comparitechは11月13日(米国時間)、「Python Network Programming Cheat Sheet - Downloadable JPG & PDF」において、Pythonを使ったネットワークプログラミングに必要となるモジュールやライブラリ、コードサンプルなどをまとめたチートシートおよびテーブルの公開を伝えた。 公開されたチートシートには次のデータがまとめられている。 一般的に必要となるモジュール: PIP、IDLE ネットワークプログラミングライブラリ ネットワークフォレンジック: 必要なライブラリとスクリプト Pythonキーワード データ型、算術演算子 Pythonを使ったネットワーク分析 dnspythonライブラリ ソケットモジュール（Berkley APIインタフェース） ソケットタイプ、ソケット作成 ソケットサンプル スクリプトサンプル 解析モジ
ゼロからはじめるデータサイエンス 第2版
本書はPythonプログラミングを通してデータサイエンスの基本知識を「ゼロから学ぶ」ことができる入門書です。読者は架空のソーシャルネットワーク運営企業、データサイエンス・スター社のデータサイエンティストとして、さまざまな課題を解決しながら、必要な知識とスキルを着実に積み上げていきます。第1版の発刊から5年。その間、データサイエンスへの注目はますます高まり、Pythonはバージョンアップが進み、ライブラリは一層充実しました。このような変化に伴い、内容を全面的にアップデート。Pythonプログラミングの基礎から線形代数、統計確率の基礎、回帰、機械学習、ナイーブベイズ、決定木、ニューラルネットワーク、ディープラーニング、自然言語処理、ネットワーク分析、リコメンドシステム、データベースとSQL、MapReduce、データ倫理まで、データサイエンスに必要な幅広い知識をカバーします。 正誤表 ここで紹
データサイエンス設計マニュアル
本書は広い視野からデータサイエンス全体を俯瞰し、問題を解決する上で重要なことは何か、その設計原則に焦点を当てた入門書です。データを収集、分析、解釈するためのシステムを構築するために必要な、確率・統計の基礎から線形代数、スコアとランキング、統計分析、データマンジング、可視化、数学的モデル、回帰、機械学習まで広範囲にわたってカバーするだけでなく、思考プロセスも重視します。著者は、ニューヨーク州立大学ストーニーブルック校で長年にわたりコンピュータサイエンス教育に携わってきた計算機科学者で、統計学と計算機科学の枠を越えた新しい学問としてデータサイエンスを捉え直し、著者独自のアプローチでデータサイエンスの本質に迫ります。 1章データサイエンスとは 1.1 計算機科学、データサイエンス、リアルサイエンス 1.2 データについての興味深い問い 1.3 データの性質 1.4 分類と回帰 1.5 データサイ
» Python実践データ分析100本ノック | 下山輝昌, 松田雄馬, 三木孝行 はじめに この本を手にした動機 元々データ分析に以前から興味があったものの、次に繋げられなかった 非エンジニアがR言語を始めるときの手引き｜Kaggle Masterによるデータ分析技術者養成講座【R言語版】Day1メモ｜中野ヤスオ｜ARI ｜note 2021年10月から12月まで受講した初級Python講座で得たことをなにか繋げたかった 講座受講の経緯等こちら：若手エンジニア成長支援No1企業を目指して｜中野ヤスオ｜ARI ｜note コードを書くことが楽しくなってきたので、毎日少しづつ出来るテーマを見つけたかった 今回の読み方 冒頭にある「本書の効果的な使い方」を参照し、それに準拠 各章各ノックの内容を「写経」しつつ、本文とコードを読み進め、分からないところをGoogleで調べる感じ 人それぞれだが、
達人出版会
探検! Python Flask Robert Picard, 濱野 司(訳) BareMetalで遊ぶ Raspberry Pi 西永俊文 なるほどUnixプロセス ― Rubyで学ぶUnixの基礎 Jesse Storimer, 島田浩二(翻訳), 角谷信太郎(翻訳) 知る、読む、使う！ オープンソースライセンス 可知豊 きつねさんでもわかるLLVM 柏木餅子, 風薬 手を動かしてわかるクリーンアーキテクチャ ヘキサゴナルアーキテクチャによるクリーンなアプリケーション開発 Tom Hombergs(著), 須田智之(訳) 詳解 AWS CloudFormation 潮村 哲 その決定に根拠はありますか？ 確率思考でビジネスの成果を確実化するエビデンス・ベースド・マーケティング 小川 貴史, 山本 寛 プログラマーのためのVisual Studio Codeの教科書【改訂2版】 川崎 庸
TL; DR 社内に眠るダークデータ、会議関連のデータを活用することで、有識者検索エンジンを作ります。 こんなやつ これで、社内の有識者やその有識者へのコンタクトパスを探せるようにします。 1. 背景。。。 1.1 働き方改革とはなんぞ 働き方改革あるあるとして、ジタハラがよく言われますね。 ジタハラ： 残業時間削減のための具体策がないまま、社員に「残業をするな」「定時に帰れ」などと退社を強要すること とあります。真面目な皆さんは、言われたとおりに帰ります 持ち帰ってサービス残業することになります。 んなアホな！！！ 1.2 会議・・・減らしてみる？ 朝日新聞によると、 大企業でのムダな会議の損失 年間６７万時間と１５億円 だそうですよ。単刀直入に聞きます。 あなた、会議減らせます？ 15億円削減できたら、ゴーン氏くらい報奨があってもいいんじゃない？ 世の中には、こんなにたくさんのノウハウ
2022年版：実務の現場で働くデータサイエンティスト向け推薦書籍リスト（初級5冊＋中級8冊＋テーマ別14冊） - 渋谷駅前で働くデータサイエンティストのブログ
(Image by ElasticComputeFarm from Pixabay) 今年も恒例の推薦書籍リストの季節がやって参りました。……なのですが、相変わらず続くCOVID-19の影響*1でデータ分析業界及び隣接分野の新刊書を読む機会が減ったままにつき、例年とほぼ同じラインナップになっている点、予めご容赦いただければと思います。 初級向け5冊 総論 R・Pythonによるデータ分析プログラミング 統計学 機械学習 中級向け8冊 統計学 機械学習 テーマ別14冊 回帰モデル PRML 機械学習の実践 Deep Learning 統計的因果推論 ウェブ最適化 ベイズ統計 時系列分析 グラフ・ネットワーク分析 SQL コメントなど 初級向け5冊 初級向け書籍リストはあまり出入りがないのが通例ですが、今回も微妙に入れ替わりがあります。 総論 AI・データ分析プロジェクトのすべて[ビジネス力×
2019年11月15日に発売されたNintendo Switchのゲームソフト「ポケットモンスター ソード・シールド」をプレイすると、インターネットに接続して使用するスマートテレビの「Roku TV」をはじめとするRoku対応メディアストリーミング端末が、再起動を繰り返すブートループに陥ってしまうとの問題が報告されています。 My Insignia Roku TV is stuck in a boot loop. : Roku https://www.reddit.com/r/Roku/comments/dx0lem/my_insignia_roku_tv_is_stuck_in_a_boot_loop/f7ohhtu/ PSA: Pokemon Sword/Shield causes Roku devices on the same network to crash and enter
昨今、情報サイトのレビューがフェイクだと疑う声が続出し、大きな問題になりつつある。大手ECサイトやグルメ系口コミサイトなどでは、報酬を得て高評価レビューをするサクラの存在などが指摘されており、消費者はどのレビューを信じていいのか難しい状態だ。 そんなフェイクレビュー問題の解決に取り組んでいるのが、東京大学発のスタートアップ企業TDAI Labだ。同社はAIでレビューの信頼度をスコアリングするサービス「WISE REVIEW」を開発。そのAI技術を使い、信頼できるレビュアーから評価されているラーメン店をランキング化したWebサイト「AIが選ぶ本当に美味しいラーメン百名店 in 東京 2019」を11月に発表して、「AIがランキングを選ぶのか」「面白い試み」などと話題になった。 ランキングの対象は都内のラーメン店で、「Google マイビジネス」にひも付くレビューを分析。2019年1月1日以降
『閉鎖すべきは学校ではなく』
感染爆発を防ぐなら、ネットワーク理論で示されるようにハブを抑えることが有効である。また感染が重症になるのは、子供ではなく高齢者や持病のある人だそうだ。そしてオープンエアでは感染しづらく、閉鎖空間での濃厚接触が主要な感染経路となる。 以上を考えると、小学校の閉鎖は優先順位は低い。児童の行動範囲をGPSで追った分析があるが、ほとんど校区内に限られていた。そして、もし児童が感染したにしても、症状は重篤にはならない。教師たちを除けば感染範囲も校区に限られる。したがって児童間の感染については、感染が分かった段階で、その学校を閉鎖すれば十分であることが分かる。 優先させるべきは、高齢者間の感染を拡大するハブを抑えることだ。その意味で例のクルーズ船は、ハブで高齢者も多く閉鎖空間と最も抑えるべきポイントだった。一般の高齢者の生活時間を調査した資料によれば、活動が閉鎖空間でなされる参加者多数の活動で、趣味・
Pythonでネットワーク構造のデータを扱いたい(networkxを扱う) - あれもPython,これもPython
データ分析の仕事をしていると、基本的な表形式のデータ以外では表現しにくい現実事象が存在します。要素と関係性で表現されるネットワークもその一つです。 個人的にはこの形式のデータは、示唆までたどり着きにくいため、ビジネス的な分析とは言いにくいな、とは思います。ただし、探索的にデータを理解したり、プロダクトの機能として使えることは多い分野だと思っているため、タイトルはあえて「データを扱う」にしました。 ネットワーク分析とは networkxはグラフ(ネットワーク)に関するデータの保持/操作をしやすくするパッケージです。 なお、情報がきちんとまとまっているのは以下の書籍です。(クリックするとAmazonにとびます) （感染症のモデルであるSIRモデルや、Word2Vecとの組み合わせなど、応用も多く非常に面白かったです。 ネットワークは繋がりを持つ要素(=ノード)と、その繋がり(=エッジ)で表現さ
35,000RTされた、あの「カフェ路線図」はどうやってできた？ にゃんこそばさんに聞くアイデア思考法とデータの魅せ方 | 宙畑
35,000RTされた、あの「カフェ路線図」はどうやってできた？ にゃんこそばさんに聞くアイデア思考法とデータの魅せ方 様々なオープンデータが世の中にある現代において、データの魅せ方も人それぞれ。そこで、Twitter上でひときわ目立つ素敵なデータビジュアライゼーションをされているにゃんこそばさんに、アイデア思考法と魅せ方のコツを聞いてみました。 企業のDX推進がますます進み、地方自治体からも多種多様なオープンデータが公表される現在、世の中には面白いデータが溢れています。 そして、それらの数多あるデータの中から面白いデータを見つけ出し、キャッチーに可視化し、多くの人の興味を引くのがデータビジュアライゼーションの世界。 データはそのままの状態では人の興味を引くことも使われることもありません。まずは見たくなるものであり、分かりやすいものになった先に、より多くの方に使われるものとなります。 今回
近年のサッカーの試合は勝敗が予測しやすく、観戦が退屈なものになってきている。こんな傾向を分析した学術論文が発表された。一昔前のリーグ戦に比べると現代の試合は、強いチームは常に勝ち弱いチームは負けるという傾向が、一段とあからさまになっているのだという。 ◆8万8000試合を分析 研究はヨーロッパに存在する11のサッカーリーグを分析対象とし、1993年から2019年までの26年間にわたる試合結果を調査した。対象となった総試合数は約8万8000試合に上る。モデルを単純化するため、このうち引き分けとなった試合は除外され、勝敗のついたゲームについて解析が進められた。研究は、アイルランド国立大学ダブリン校のタハ・ヤセリ准教授（計算社会科学）が主導した。昨年12月、英国王立協会が刊行する科学ジャーナル「ロイヤルソサエティ・オープンサイエンス」に掲載されている。 ヤセリ准教授たちは各チームについて、期待で
Sansanを退職してUbieに入社します
2018年1月より2年半勤めたSansan株式会社を退社して、2020年7月よりUbie株式会社に入社します。現在は現職の有給消化中で少し気が早いですが、退職エントリを書きたいと思います。前回の転職エントリは手短だったので、今回は自分の仕事内容と絡めつつ互いの会社のことやデータサイエンスのキャリアのことについて長めに書きます。ちなみに、私のプロフィールは https://yag.xyz/ をご覧ください。 これまでの仕事 Sansanは法人/個人向けのクラウド名刺管理を提供している会社で、名刺のデータ化に関わる開発やデータ活用を推進しているDSOC (Data Strategy & Operation Center)という部署に入りました。Sansanに中途入社する前に在籍していたリクルートテクノロジーズでは機械学習のプロダクト開発を担当しており、Sansanでも引き続き機械学習でサービス
AWSでの通信ネットワークのデプロイと管理を自動化し、通信サービスプロバイダーが簡単かつ迅速にネットワークの構築、拡張できるよう支援 Amdocs、Infosys、O2 Telefónica などのお客様およびパートナーがAWS Telco Network Builder を採用 （シアトル — 2023 年 2 月22 日）Amazon.com, Inc. （NASDAQ: AMZN）の関連会社である Amazon Web Services, Inc.（以下、AWS）は2月22日、通信ネットワークを AWS 上でデプロイ、運用、拡張するお客様を支援するフルマネージドサービス、AWS Telco Network Builder の一般提供を開始したことを発表しました。通信サービスプロバイダーが、ネットワークの詳細（接続ポイント、ネットワーキング要件、コンピューティング需要、地理的分布など）
ネットワークという観点から近年の歴史を語り直す──『スクエア・アンド・タワー：ネットワークが創り変えた世界』 - 基本読書
スクエア・アンド・タワー(上): ネットワークが創り変えた世界 作者:ニーアル ファーガソン出版社/メーカー: 東洋経済新報社発売日: 2019/12/06メディア: 単行本スクエア・アンド・タワー(下): 権力と革命 500年の興亡史 作者:ニーアル ファーガソン出版社/メーカー: 東洋経済新報社発売日: 2019/12/06メディア: 単行本「スクエア・アンド・タワー」、直訳すると「広場と塔」というのは不思議な書名だが、これはそれぞれネットワーク型と階層型の社会や人間関係全般をさしている。 たとえば、人間の暮らしはこれまで多くの場面において階層型の構造が支配的であった。上に立つ人間が下の人間に情報や命令を伝え、それが下の人間へと広がっていく「塔」の構造。一方近年はネットワーク優位な時代といわれる。単純に階級に応じて力の強さが決まる階層型に対して、水平に広がった集団の中での力関係は、複数
2020年米国大統領選挙が近づくにつれ、外国政府による選挙介入のリスクが注目を浴びている。 もちろん外国政府による選挙介入は近年に限った現象ではないが、今日では選挙活動、有権者の合意形成、投開票といったプロセスが電子化・デジタル化され、選挙介入の規模とその影響がかつてない程大きくなっている。 そして、現在、民主主義国家・社会が直面している選挙介入は死活的な問題になりうるものである。なぜなら、選挙介入は特定の候補者・政党への攻撃に留まらず、選挙そのものや代議制民主主義に対する攻撃だからである。 言い換えれば、選挙介入の目的は、候補者・政党・政策等の「特定対象」への政治不信を高めると同時に、全般的な「政治制度」への政治不信を高めることである。少なくともロシアによる2016年米大統領選挙への介入は、この2つの側面で米国民の政治不信を高めることが目的であった。（注1） より問題が大きいのは後者の「
PyCon JP 2024に行ってきました PyCon JP 2024に参加してきました！ 今回は私史上初の主催スタッフとしての参加で、会場の運営に携わりました。 以下、登壇資料のまとめ集です。 PyCon JP 2024タイムスケジュール ※ユーザ名は敬称略です。 Day1 Django Ninjaで高速なAPI開発を実現する: 実践ガイドとベストプラクティス @mmmm70641 Robot FrameworkとNVDAスクリーンリーダーによるアクセシビリティのテスト自動化 @24motz Crafting Your Own Numpy: Do More in C++ and Make It Python @tigercosmos 5年分のツケを一気に払った話 @soogie あなたのアプリケーションをレガシーコードにしないための実践Pytest入門 @fuine 実践structlo
韓国の安全保障・外交戦略――隣国は「レッドチーム（中国・北朝鮮・ロシア）」入りを目指しているのか？/伊藤弘太郎 - SYNODOS
韓国の安全保障・外交戦略――隣国は「レッドチーム（中国・北朝鮮・ロシア）」入りを目指しているのか？ 伊藤弘太郎 国際政治学、韓国の外交・安全保障政策 国際 #安全保障をみるプリズム 2019年7月、日本政府は韓国に対して、半導体などの材料となる化学製品３品目の輸出規制を課した。以来、1年以上の月日が経過した。日本側が指摘した韓国の安全保障貿易体制の不備に対して、この間、韓国政府はその不備を強化したとアピールしている。 具体的には、以下の３つの対応が取られた。第一に、輸出規制措置以来、課長級会議・局長級政策対話を重ね、それ以前は3年半の間行われていなかった日韓関係省庁間の政策対話を促した。第二に、通常兵器に転用される可能性がある物資の輸出を管理するために、「対外貿易法」を改正し、規制の法的根拠を明確にした。第三に、産業資源部内に、「貿易安保政策官」（貿易安保政策課、貿易安保審査課、技術安保課
Python・データマイニング・統計・機械学習帳など、データサイエンスを無料で勉強できる教材6選 | Ledge.ai出張所
2022年はデータサイエンスという言葉が色々な場所で聞かれる1年だったと思います。今回は、2023年にもっと多くの人が興味を持つであろうデータサイエンスを無料で学べる教材6選を紹介したいと思います。これらの教材は、アメリカの大学で統計学や機械学習などを勉強している筆者が実際に利用したり、利用しようと思っているものです。Pythonや統計学、機械学習を学んでみたいと思っている方はぜひ活用してみてください。また、この記事の最後にはレッジAIが今までに紹介してきた学習コンテンツ紹介の記事へのリンクもあるのでぜひそちらもチェックしてみてください。 筑波大教授が著した無料の初心者向けPython教材筑波大学の三谷純教授によって著されたスライド教材で、2021年5月に初公開され、2022年2月に大幅に内容が更新された新たな改訂版が公開された。同スライドは三谷教授の著書である「Python ゼロからはじ
2023年版データ分析の100冊 が好評でしたので、2024年版を作りましたよ。 本記事のめあて IT系の技術者の方がデータ分析関連の仕事をするために役立つ本を紹介する（私が学び始めた時にあれば欣喜雀躍したであろう）記事として書いております 本記事作者の青木はバイオインフォマティクス（ゲノムデータのDB化中心・Perl・MySQL）からRで時系列分析→Pythonでデータ分析一般と業務をしてまいりました ですので研究者目的の本はありません。また、データ分析の基礎は主にRで学んだのですが、昨今の流行に合わせて理論のほかはPython本のみにしています 「本記事のR版のご要望があれば爆裂書きます！」と去年書いたのですが要望0 あはは、Rの本は今回撲滅しました！ こういうリストを挙げる奴は大抵読んでいない、と過去にも言われたのですが、未読本は削除しました 最近好著連発なので読んでいる途中だけど挙
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
なぜリベラルの声は中間層に届かないのか？（鳥海不二夫） - エキスパート - Yahoo!ニュース
LGの洗濯機がなぜか1日3.6GBもデータ通信をしていると持ち主が困惑、LGが調査に乗り出す
中国で買ったAndroidスマホ、個人情報がダダ漏れだった……
中国で買ったAndroidスマホ、個人情報がダダ漏れだった…
【保存版】オープンデータ・データセット100選 -膨大なデータを活用しよう！ | AI専門ニュースメディア AINOW
「ドン」がネットワークのくびれで機能する - やしお
GIS に欠かせない Shapefile を深堀ってみる - Qiita
2024年版機械学習・データ分析の必須10冊+ガチ90冊+Next5冊=105冊 - Qiita
Pythonのネットワークプログラミングに必要なデータまとめ
「Python実践データ分析100本ノック」を写経してみた - Qiita
社内の会議情報を機械学習して有識者検索エンジンを開発するというHRTechしてみた - Qiita
「ポケットモンスター ソード・シールド」でテレビがクラッシュ
AIが「本当においしいラーメン店」を判定 頼りは口コミ、偽レビュー排除の仕組みを開発者に聞く
サッカー観戦が退屈に？「強い」チームがより勝ちやすく＝研究 欧州8万8000試合を分析
AWS、AWS Telco Network Builder を発表
外国からの選挙介入、「ディスインフォメーション」から民主主義を守れ/川口貴久 - SYNODOS
PyCon JP 2024 @TOC有明 登壇資料まとめ
2024年版機械学習・データ分析の必須10冊+ガチ90冊+Next5冊=105冊 - Qiita