[B! データ分析] tell-kのブックマーク

メルカリのデータサイエンスチームと分析エコシステムのはなし | メルカリエンジニアリング

※各プロダクト名の頭の”Google”は省略しています ※もちろん実際にはGoogle社のツール以外にも様々な分析用プロダクトが使われています各ツールの詳細についてはWeb上の良質な情報がたくさんあるので、説明はそちらに譲るとして、ここではそれぞれの簡単な特徴とメルカリでの活用の仕方について主に述べていきます。 ◆ 1.BigQuery “弊社分析の中核的存在” 利用シーン：データの集計どんなツールか Google BigQuery SQLの超速いやつどんな大きなデータでも、複雑なクエリでも、高速で結果を返してくれる頼れるアニキメルカリの分析での使い方速いは正義メルカリは多くのユーザを抱えているため、そのログデータも非常に巨大です。そのため、通常のSQLでは計算に時間がかかりすぎるということが多々発生します。 BigQueryはとにかく「高速」の一言。なのでトライアンドエ

tell-k 2017/05/22

リンク

スタディサプリを支えるデータ分析基盤～設計の勘所と利活用事例～

The document is comprised of technical documentation copyrighted by Recruit Marketing Partners Co., Ltd. It includes code snippets and configuration examples for tools like AWS Lambda, Kinesis, Presto, Hive, Embulk and Treasure Data. The documentation provides guidance on building data pipelines, ETL processes, and reporting solutions using these techno logies.Read less

tell-k 2017/02/19

リンク

大規模データに対するデータサイエンスの進め方 #CWT2016

Cloudera World Tokyo 2016 有賀発表データサイエンスを含めたチームづくりと、機械学習を活かしたプロダクトの作り方について話しました。Read less

tell-k 2016/11/10

リンク

国民性の指標「ホフステッド指数」を分析する - Platinum Data Blog by BrainPad

本記事は、当社オウンドメディア「Doors」に移転しました。約5秒後に自動的にリダイレクトします。皆さん、こんにちは。研究開発室の佐藤貴海です。 Platium Data Blogへは初投稿ですが、実は、前回エントリーの「ツール・ド・東北」には選手として登場しています。応援する気持ちと、応援される感動がたくさん詰まった「ツール・ド・東北 2014」参加レポート - Platinum Data Blog by BrainPad 今回は、以前より気になっていた「ホフステッド指数」について、趣味と実益を兼ねて分析と考察をします。 1. ホフステッド指数とは？気になったきっかけは、以下の日経BizGateの記事。様々な国の文化（国民性）を定量的に測定し、指数化しようとしたのがヘールト・ホフステッドである。ホフステッドは米IBMの世界40カ国11万人の従業員に行動様式と価値観に関するア

tell-k 2016/07/03

リンク

Pythonを使ったデータ分析に関する内容をJupyter Notebookにまとめ始めました - c-bata web

研究をかれこれ2年半ぐらい続けてきたので、研究をする中で必要になった機械学習の手法について調べたりコードを書いたりしてきたのですが、まだまだ触ったことのない機械学習の手法も多く、研究で必要になる手法以外の知識も付けたくなってきたので、勉強し始めました。 Sphinxにまとめるか悩んだのですが、「ひとまず簡単にスライドにできること」・「手元でもすぐにコードを実行できる」という理由でJupyter Notebookを使用しています。もし誤りやタイポ等があれば、IssueやPRお待ちしております。 github.com 今のところ↓の2つについてまとめました。 Jupyter Notebook / Numpy / Pandas / matplotlib入門決定木(Decision Tree) ノートブックの内容一覧内容については今後何度も変更をすると思いますが、とりあえず今の予定としては下