[B! 統計] j-haradaのブックマーク

階層ベイズモデルを用いた労働時間と知的好奇心の関係分析 - kivantium活動日記

以前@berobero11さんに「StanとRでベイズ統計モデリング」をプレゼントしていただき、本を読んだのですが解析したいデータがなかったため勉強した結果を活かすことができずにいました。しかし今日Twitterを見ていたら長時間労働は，知的好奇心を枯らすのか。 pic.twitter.com/NcuaLAgzpy— 舞田敏彦 (@tmaita77) 2017年11月13日労働時間と知的好奇心には，国レベルでは非常に強い負の相関があるが，個人レベルでは逆に正の相関がある https://t.co/N8Z00ljFfB— Haruhiko Okumura (@h_okumura) 2017年11月15日というまさに階層ベイズモデルを用いた解析にぴったりのテーマが流れてきたのでStanの練習として解析を行ってみました。モデリングまずは奥村先生のPIAACデータ解析を読んでください。

j-harada 2017/11/18

リンク

機械学習を使って東京23区のお買い得賃貸物件を探してみた - データで見る世界

さて、改めて今回の目的を確認しておくと、機械学習を使って東京都23区のお買い得賃貸物件を発見しよう、というものです。前回までの記事で、お買い得賃貸物件を発見するためのデータを収集し、分析にかけられるよう前処理してきました。 www.analyze-world.com www.analyze-world.com 今回の記事では、いよいよ機械学習を使って分析していきましょう。前回まではPythonを使っていましたが、この分析ではRを用いています。なお、コードはGitHub（https://github.com/ShoKosaka/Suumo）に上げておきますので興味ある方は参照ください。最初に、データの中身をざっくり見ていきます。具体的には、分析のキーになるポイントをグラフにしながら、賃貸物件の現状や変数同士の関係性を把握していきます。データ探索まず、23区の中でどこが物件数が多いのかを

j-harada 2017/11/10

リンク

日本の産業分類別年収/労働時間ヒートマップ - A Successful Failure

2016年06月07日日本の産業分類別年収/労働時間ヒートマップ Tweet 厚生労働省は毎年産業分類別に賃金や労働時間の調査を行っている。10名以上の従業員を抱える5万余の民間事業所に対する調査をまとめたものであり、最新の調査結果は今年2月に公表された平成27年賃金構造基本統計調査だ。そこで同調査にもとづき、産業分類別の年収、月間労働時間をヒートマップにしてみた。男性・女性の降順にソートしたバージョンも用意しているのでそちらも見て欲しい。サムネイルをみるだけで、男女に厳然とした差があることが一目瞭然だ。産業分類別年収テーブル（男性ソート版・女性ソート版）産業分類別月間労働時間テーブル（男性ソート版・女性ソート版）産業別明細票さらに産業分類ごとに調査結果を確認できる検索フォームも用意した。上部のプルダウンメニューを選択することで、所望の産業の給与/労働時間テーブルを参照すること

j-harada 2016/06/08

リンク

22年分の生活者データを無償公開　博報堂生活総研「生活定点2014」特設サイトで閲覧容易に

博報堂生活総合研究所は10月22日、生活者意識の定点観測調査「生活定点」を無償で一般公開した。データをダウンロードして2次利用することが可能な上、特設サイトではデータを活用したコンテンツを多数用意し、データ分析に慣れない人でもさまざまな視点から意識の変化が時系列で分かるようになっている。生活定点は1992年から隔年で実施。首都40キロ圏（東京都、埼玉県、千葉県、神奈川県、茨城県）と阪神30キロ圏（大阪府、京都府、兵庫県、奈良県）の20～69歳の男女という同じ対象者設定に対し同じ質問を継続して尋ねる定点調査で、項目数は衣食住から恋愛・結婚、消費、メディア接触など項目数は約1500。2014年の有効回収数は3201人だった。サイトでは、22年間にわたる約1500項目の回答値を一覧できる集計表（Excelファイル）を無償でダウンロードできる。集計表は検索機能や時系列グラフの自動作成機能などを

j-harada 2014/10/22

リンク

総務省、政府統計データが見られるアプリ「アプリDe統計」提供開始

総務省は4月15日、スマートフォン上で政府の統計データが見られるアプリ「アプリDe統計」（試行版）の提供を開始。Android OS 4.0.3以上で利用できる。統計データの中には、各都道府県・市区町村別の就業者数や失業者数、牛肉100グラムあたりの物価、住宅の建て方まで、細かなデータが網羅されており興味深い。ワイシャツの値段やガソリンの値段まで詳細なデータ（左）があり、データ項目（右）も幅広い統計にまつわるクイズ（左）や、自分だけの統計グラフ（右）も作成できるアプリでは、スマートフォンのGPSと連動させて今いる市町村のデータを表示したり、気になる地域の情報をタップしてデータを見たりすることができる。また、統計にまつわるちょっとしたゲームや、任意の統計グラフの作成も楽しめる。今回の試みは、統計における「オープンデータ活用への取り組み」の一環として、総務省統計局および独立行政法人統

j-harada 2014/04/16

リンク

産総研：ビッグデータから新たな科学的発見をもたらす統計手法を開発

ビッグデータからの科学的発見のためには、正確な検定値（Ｐ値）の算出が必要。超高速アルゴリズムを用いた新たな統計検定手法を開発し、発見力を大幅に改善した。物理学、医学、化学など全ての実験科学において世界中での広い利用が期待される。ＪＳＴ課題達成型基礎研究の一環として、産業技術総合研究所生命情報工学研究センターの津田宏治　主任研究員（ＪＳＴＥＲＡＴＯ「湊離散構造処理系プロジェクト」グループリーダー）、東京工業大学大学院情報理工学研究科計算工学専攻の瀬々潤　准教授、理化学研究所統合生命医科学研究センターの岡田眞里子チームリーダーらは、従来に比べて格段に高い精度で誤発見の確率を示す検定値（Ｐ値）を計算するアルゴリズム（手順）を開発しました。自然科学で得られるデータ量は増加の一途をたどり、これらを有効に解析できる方法が望まれています。しかし、従来の統計検定手法は観測できる