Treasure Dataに入社しました - myui's memo
3/31付けで4月から国立研究開発法人になった産業技術総合研究所を退職致しまして、4/1からTreasure Dataに入社しました。第一号のResearch Engineerとして東京オフィスで働きます。 CTOの太田さんから2013年頃に一度お誘いを受けておりましたが、2014年になってまた声を掛けて頂き、2年越しでの入社となりました。 なんでTreasure Data？ 現在のTreasure Dataでは、毎秒45万レコード、4,000億レコード/日ものデータが投入されていて、Hiveで処理されるデータ量も3+ペタバイト/日と急速な発展をとげております。研究でもこの規模のデータ量を扱うことはGoogleやFacebook等の一部の研究者を除いてはありませんから、非常に挑戦的な課題に取り組める環境であることにDB研究者として第一に魅力を感じました。優秀なエンジニアが集まっていて刺激的
クックパッドのデータを研究者に公開します - クックパッド開発者ブログ
こんにちは。検索・編成部の原島です。 大学の研究者にお会いすると、「クックパッドのデータを研究に使用したいんですが...」と相談されることがあります。料理に関する研究をしているけれど、実際のデータがないため、なかなか研究が進まないという相談です。 料理に関する研究が進まないのは、クックパッドにとっても残念なことです。これらの研究は、クックパッドのサービスを改善するための「芽」でもあります。データがないだけで芽が育たないのは、非常に悲しい話です。 このような現状を打破するため、本日から、クックパッドのデータを研究者に公開します。このエントリでは、我々が準備してきたデータ公開の仕様について QA 形式で解説します。 誰が利用できるの？ 申請していただいた研究者です。ただし、公的機関（e.g. 大学、独立行政法人）の研究者に限ります。申請時には、クックパッドと国立情報学研究所（後述）による審査が
Rでスポーツデータ解析がしたい: データを作るのって大変ですね - 300億円欲しい
はじめに R advent calendar 2014, 12月3日担当分です. Rのコードは出てきません. 野球のデータで遊びたい 私は普段, メジャーリーグのデータで遊んでいます. というのも, 整形されたメジャーリーグの詳細なデータが簡単に取得できるからです. 半年前に作ったスライドで申し訳ないのですが, こんな感じです. Rで野球データ解析がしたい ( pitchRxを使う ) from Takuma Hatano Rで野球データ解析がしたい ( pitchRxを使う ) pitchFxは, メジャーリーグの投球に関するデータ(を集めるシステム)です. RでpitchRxパッケージを使うと簡単に取得できます. 他にも, メジャーリーグのデータは簡単に取得できます. retrosheetという団体がデータをまとめてくれているので, ダウンロードして整形してcsvを出力してくれるスクリ
「情報管理Web」：JST（独立行政法人科学技術振興機構）の｢学術情報流通｣発信サイト
「情報」はあらゆるものに付随しています。 現代社会は、情報が氾濫しているため、何かを知りたいときには、その膨大な情報のなかから、取得選択をしなくてはいけない機会が増えています。 関連性が高いもの、精度の高いものを収集しなくては、ウソの情報に踊らされてしまいますので、慎重に実行するべきタスクです。 そして、個人も企業も、情報を収集するだけではなく、保存・管理を行わなくてはいけません。 「情報」を「管理」する。 情報管理とは、「情報を簡易に取り出せる」「情報を活かす」「情報を適切に保存する」という意味があります。 最近では「情報管理」の意味合いに、「流出させない」というものも含まれています。 インターネットの普及に伴い、サイバー攻撃も身近なものになっているためです。 あなたの個人情報、企業の持つ顧客の個人情報や企業の機密情報が、不特定多数に狙われています。 情報管理がずさんだと、あっという間に
ノムさんの本は本当に使いまわしばかりなのか検証してみた | オモコロ
どうも、野球好きです。 よく「政治と宗教と野球の話はするな」と言われていますが、 今からめちゃくちゃ野球の話をします。 野球わからない人本当にすいません。 しかし、野球を知らなくても、 野村克也という人物は皆さんご存知かと思います。 自分は野村克也を信奉している野村信者の一人なのですが、 そのノムさんに関して最近このようなことがよく言われています。 「野村克也の本、話を使いまわしすぎ」 いやいや、そんなことないだろ。 もし本当にそうだったとしても 捕手でありながら通算3017試合も出場して 657本もホームラン打ってるんだからどうでもいいだろ。 というわけで、ノムさんの本は本当に使いまわしが多いのか、 実際に野村克也の著作を読んで検証してみました。 以下が読んだ本のリストです。 読み飛ばして大丈夫です。 1『野村ノート』（小学館、2005年10月） 2『巨人軍論：組織とは、人間とは、伝統と
RIETI - 独立行政法人経済産業研究所 RIETI
データが明かす習近平の政策アジェンダ 権力の集中は政策をどう変えたか 2024年6月11日 ［Special Report］ 林 載桓（青山学院大学）／伊藤 亜聖（東京大学）／張 紅詠（上席研究員） 外国企業との協業により経営力を強化！―さらなる企業の成長のヒントが経産省の協業連携事例集に（配付資料・動画配信） 2024年6月 3日 ［シンポジウム］ 博士課程卒業者の労働市場成果 2024年5月28日 ［ノンテクニカルサマリー］ 森川 正之（特別上席研究員（特任）） テレワークの実態：「就業構造基本調査」ミクロデータに基づく概観 2024年5月27日 ［ノンテクニカルサマリー］ 森川 正之（特別上席研究員（特任）） 主要通貨圏の規模の推定とその決定要因 2024年5月22日 ［ノンテクニカルサマリー］ 伊藤 宏之（客員研究員）／河合 正弘（東京大学） IMF世界経済見通し（配付資料・動画配
右脳型、左脳型は存在しない。脳の使い方に個人差がないことが判明（米研究） : カラパイア
その人の考え方の特徴やタイプを表わすのに右脳型とか左脳型という言葉が良く使われる。男性は左脳型、女性は右脳型などとも言われており、「地図が読めない女性」は右脳型の典型とも言われていた。 右脳型の人は創造性があって感情的、左脳型の人は論理的で解析的とされ、それぞれ右脳や左脳をの使い方がどちらかに偏っていると信じられていた。だが実際はそんなことはないという。最新の研究結果では、右脳と左脳の活動に個人差はないということが判明した。
ニコニコ動画の10％超を「実況プレイ動画」が占めている (1/2)
この連載では、独自に収集したデータを使って、みんな知ってるようで知らないニコニコ動画の現在を紹介していきます。第5回は、もはや投稿数の1割以上を占めるまでに至った「実況プレイ動画」タグを取り上げます。連載一覧はこちら。 明治大学米沢嘉博記念図書館スタッフでニコニコ学会β幹事。趣味で同人誌やニコニコ動画関連の研究をしてる人。記事に使ったデータ元の『ニコニコ統計データハンドブック2013』など同人誌をコミケで頒布。ブロマガでは連載記事の補足も。 Twitterアカウントは@myrmecoleon。関わった近著に『進化するアカデミア 「ユーザー参加型研究」が連れてくる未来』（イースト・プレス刊）。右の画像は筆者を擬人化？して描いてもらったキャラ「ありらいおん子」。男の娘。 ■Amazon.co.jpで購入 ニコ動最大のジャンル「実況プレイ動画」 「実況プレイ動画」は投稿者が実況しながらゲームをプ
靴屋とデータマイニングと季節外れの冬物衣料 - あんちべ！
やぁ。4月も終わりだというのに、いやに寒い日が続いてるね、元気かい？ 面白い話がtwitterに流れていたので紹介したい。 日経コンピュータの話。ビックデータ神話に乗り、多額の費用で解析した靴屋の話、解析結果、冬にブーツが売れ、夏にサンダルが売れるw。 https://twitter.com/yawachi/status/326460494154194944 これを見て君はどう思う？ twitterでは皆がこのニュースに対して嘲笑を投げかけていた。 そりゃそうだろう、大金を掛けて誰でもわかることしか出てこないなんて、笑われて当然さ。 データマイニングってのは、やっぱり、もっとこう、あの有名な「おむつとビール」ような意外性のあるものじゃないとね。 そう、データマイニングに必要なのは意外性だ！ あの靴屋は全く馬鹿なことをしたもんだ、ゲラゲラ！ OK、笑いが取れたようなので、もう一つ同じような話
はてなブログ | 無料ブログを作成しよう
スロウでローファイ Xをやめてから急に写真を撮る速度が落ちたようで、そういえば最近このblogにもフィルム写真の話題を書いていない。 写真に飽きたわけではなくペースが落ちただけなのだが、よくよく考えてみれば写真なんて分野はそうそう目新しいことが起きるわけでもなくイノベーショ…
生活定点1992-2018｜博報堂生活総研
生活定点とは？ 1992年から隔年で実施している生活者の意識調査です。同じ質問を繰り返し投げ掛け、その回答の変化を定点観測しています。
NoSQLデータモデリング技法
NoSQLデータモデリング技法.markdown #NoSQLデータモデリング技法 原文：NoSQL Data Modeling Techniques « Highly Scalable Blog I translated this article for study. contact matope[dot]ono[gmail] if any problem. NoSQLデータベースはスケーラビリティ、パフォーマンス、一貫性といった様々な非機能要件から比較される。NoSQLのこの側面は実践と理論の両面からよく研究されている。ある種の非機能特性はNoSQLを利用する主な動機であり、NoSQLシステムによく適用されるCAP定理がそうであるように分散システムの基本的原則だからだ。一方で、NoSQLデータモデリングはあまり研究されておらず、リレーショナルデータベースに見られるようなシステマティック
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ggsoku.com
クローリングしてる暇があるなら…論文かいたら? | EDGE Datasets(研究用データセット)
http://blog.chase-dream.com/2010/05/30/990