最強の野球オープンデータ「Retrosheet」をPython+Vagrant+Ansibleで誰でも使えるようにしました - Lean Baseball
2ヶ月前のエントリーにはてブが入りまくった件で「そういえば続編書いてないや」と気が付き、エントリーしますた。 「誰でも」の定義および、このエントリーの対象読者について 「誰でも」というのは、 （エンジニアなら）誰でも という意味です。 より具体的には、 野球愛溢れるエンジニアにとって、Vagrant + Ansibleでのサーバー構築の練習&Pythonでのプログラミングという趣味実益を兼ねたいい感じのお勉強なるかつ、趣味の野球でhackが出来る二度美味しい内容です 野球に興味が無い方にとっては野球愛溢れるエンジニア同様サーバー構築&Pythonネタとしていい勉強になるかもです。ただ、他にももっといいエントリーがあると思います 非エンジニアの野球ファンの皆さまにとっては（小難しい的な意味で）ヘビーな内容となっていますので、覚悟してお読みください！ただ、プログラミングを覚えたい方にとっては凄
SIOS ビッグデータ技術ブログ: GREE Tech Talk #03への参加報告
こんにちは、SSTDの高橋です。 昨日行われたGREE Tech Talk #03に参加しましたので、その内容の報告をさせて頂きます。 今回のGREE Tech Talkのテーマは、サービスづくりにおけるデータの活用でした。 ハッシュタグはこちら（#greetech03）。 下の写真は、GREEさんから頂いたジェンガです。 当日のプログラム 『開会の挨拶』藤本 真樹（グリー株式会社）『GREEプラットフォームにおけるビッグデータの活用』橋本 泰一（グリー株式会社 開発本部）『アドテクノロジー業界でのデータ活用』奥野 晃裕（株式会社スケールアウト）『データ駆動開発＠トレジャーデータ』小林 隆（トレジャーデータ株式会社）『GREEインフラでのデータ取得と使い方』田中 祥平（いわなちゃん）（グリー株式会社）『ビッグデータを楽しむためのシステム技術と大学での最先端な試み』合田 和生（東京大学 生産
個人情報の保護レベルを世界水準に合わせよう
個人情報保護に詳しい鈴木正朝・新潟大学教授は、JR東日本が交通系ICカード「Suica」の乗降履歴データを日立製作所に販売した件は、個人的には現行法でもクロと言わざるを得ないと指摘。その上で「ビッグデータ」ビジネスの中核は、国際競争力を発揮できる「医療イノベーション」にあると主張する。日本の産業力強化のためには、個人データの保護レベルを国際水準に引き上げて、ゲノム情報を世界から持ち込んでも安心されるハブ機能を持つ必要があると訴える。 私は現行法でクロと言うべきだと思います。JR東日本を叩くつもりはありませんが、あえてクロだと指摘することで、個人的にこの事例から浮かび上がる現行法の問題点を明らかにしたいのです。 そもそも今回の話はビッグデータというオブラートに包まれていますが、乗降履歴は伝統的なデータベースによるただの受託データです。例えて言えば、何百社もの給与計算のデータを持つ受託企業が委
ソニーがFeliCaでビッグデータ事業参入
ビッグデータとプライバシーの議論に一石を投じるか---。ソニーがビッグデータ利活用事業へ向け、本格的に足を踏み出した。 同社は2013年8月19日、ビッグデータの活用を目的として、プライバシーに配慮したクラウドシステムを開発したと発表した。個人を識別するデータを分離して、履歴データのみインターネット上のサーバーに保存する仕組みだ。サイバー攻撃などで万が一データが漏洩しても、プライバシーの被害を最小限にできる。 このクラウドシステムを利用した事業の第一弾は、薬局で受け取る処方薬の履歴データをサーバーに保存する「電子お薬手帳」である（図）。2013年秋に川崎市全域で試験サービスを開始する。 利用者にはまず、ソニーが開発した非接触型ICカード技術「FeliCa」対応の専用カードを配布する。FeliCaカードには、利用者に割り当てた共通IDと、暗号化した氏名、生年月日を保存する。サーバーには、共通
データサイエンティストが要らなくなる日が来るかもしれない | IT Leaders
大手ITベンダーの研究所でビッグデータ活用に携わった経験を生かし、データサイエンティストに関する情報を発信する株式会社プリファードインフラストラクチャーの比戸将平氏に話を聞いた。 ―前職のIBM東京基礎研究所でデータ解析関連のプロジェクトを担当された経験を活かし、データサイエンティストに関する講演をされています。データ分析の現場を生々しく描かれていますね。 昨年ごろから、データサイエンティストという言葉を耳にする機会が増えました。興味を持って調べてみたところ、かつて私が担当していた業務そのものでした。当時、私は機械学習やデータマイニングを使って、顧客をセグメンテーションしたり、機械が壊れる前に兆候を検知したりする仕組みを構築していました。それならば、データサイエンティストと呼ばれる人材の実態や、悩みどころをシェアできるのではないかと考えたのです。 昨今、データサイエンティストには、期待が集
Ｓｕｉｃａ履歴、販売していた…乗客に説明せず （読売新聞） - Yahoo!ニュース
約４３００万人が利用するＩＣカード乗車券「Ｓｕｉｃａ（スイカ）」の乗降履歴が、今月からＪＲ東日本によって市場調査用データとして販売され始めた。 ＪＲ東は「名前などは匿名化している」として、利用者に販売の事実を説明していなかった。国土交通省は個人情報保護法に抵触する可能性がないかＪＲ東から事情を聞く一方、「事前に利用者に説明すべきだった」と注意した。企業の熱い視線がビッグデータに注がれる一方、プライバシー保護については明確なルールがない状態だ。 提供データは、私鉄を含む首都圏約１８００駅の利用者の性別、年齢、乗降日時。定期券として使う客の場合も氏名や住所は除き、ＩＤで個々のデータを識別する。日立製作所が購入し、駅ごとの集客力や客層を分析の上で販売。情報料は最低で年５００万円になるが、「企業のマーケティング戦略に役立ち、需要は大きい」と説明する。
サービス終了のお知らせ - NAVER まとめ
サービス終了のお知らせ NAVERまとめは2020年9月30日をもちましてサービス終了いたしました。 約11年間、NAVERまとめをご利用・ご愛顧いただき誠にありがとうございました。
ビッグデータ活用の主役はITでも分析官でもない
これほど企業や社会の関心を集めている“ビッグデータ”だが、実際に活用に乗り出している企業はまだほんのひと握りだ。だが、分析で一番大切なことはデータサイエンティストの確保でもなければ、分析基盤への投資でもなく、ビジネスのプレーヤー自身がデータを生かす目を養うことではないのだろうか。 ほとんどの企業で、なかなか現実的にならない“ビッグデータ活用” ビッグデータという言葉が社会に浸透し、多くの企業が分析に関心を寄せている。だが、複数のハードルがビッグデータ活用に踏み切る企業の足を鈍らせている。 1つはノウハウの問題だ。将来予測のような高度な分析を行うためには、統計解析の知識や高度なスキルが不可欠となる。だが、そうしたノウハウを持った人材は不足しており、育成に時間がかかるほか、外部からスカウトすることも難しい。 コストの問題もある。特に近年、BIが多くの企業に浸透したが、実績などを報告するレポーテ
ビッグデータ時代のキーテクノロジ、「CEP」とは何か
ビッグデータ時代のキーテクノロジ、「CEP」とは何か：戦略的ITを実現するキーテクノロジ（1）（1/2 ページ） 本連載では、戦略的IT活用を実現する「これからの技術要素」を紹介していく。現代のキーテクノロジのアウトラインをつかむことで、ビジネスの新たな可能性を考えたり、「経営に貢献する情報システム部門」への変革を図ったりするための一助にしてほしい。 「経営への貢献」を求められている情報システム部門 ビジネスがグローバル化し、市場競争も激化している現在、企業は市場動向変化に俊敏に対応することが求められている。特に、新規サービスのリリー ス、新たな付加価値の提供など、何をするにもITの力抜きでは語れない今、システム活用の在り方そのものが企業の命運を握ると言っても、決して過言ではない。 こうした中、情報システム部門に求められる役割も大きく変わろうとしている。言われた通りに作るだけだったり、パッ
ロイヤリティマーケティング、「Ponta」の顧客データ分析し、販促策作成：日経ビジネスオンライン
気になる記事をスクラップできます。保存した記事は、マイページでスマホ、タブレットからでもご確認頂けます。※会員限定 無料会員登録 詳細 ｜ ログイン
「ビッグデータ」でさらに進化するO2Oの世界《O2Oビジネス最前線・黎明期を迎えた新・消費革命》(1) | 産業・業界 | 投資・経済・ビジネスの東洋経済オンライン
「ビッグデータ」でさらに進化するO2Oの世界《O2Oビジネス最前線・黎明期を迎えた新・消費革命》(1) - 12/08/03 | 12:03 「Data is the new oil.(データは新しい石油だ）」 現在、米国のメディアで流行している言葉だ。20世紀の産業経済における「石油」のように、21世紀のデジタル経済において、「データ」が富の源泉となる可能性を秘めていると言われる。 O2O（オンライン・ツー・オフライン）ビジネスの今後を語るとき重要になってくるのが、「超巨大データ」。すなわち「ビッグデータ（Big Data）」を、各プレーヤーがいかに手に入れ、活用できるかだ。 2011年以降、IT業界での重要なキーワードとしてつねに「ビッグデータ」が挙がる。Amazon 、Googleといった米大手ネット企業が先行して取り組み、自社の利益に変えてきた。今、国内の大手リアル企業もビッ
ビッグデータ予測が16人中15人的中――AKB48選抜総選挙
2012年6月6日に日本武道館で行われた「第4回AKB48選抜総選挙」は、過去3回のうち2回センターに輝いた前田敦子の卒業発表による出馬辞退で、跡目争いが注目された。開票に先立って、スポーツ紙からAKBファンを自称するタレント、リサーチ会社までさまざまな事前予想が繰り広げられたが、中でも精度の高さを誇ったのが、ブログクチコミ件数などから算出した“ビッグデータ予測”。選抜メンバー上位16人中15人の顔ぶれを的中させていた。 デジタルマーケティングコンサルティング会社のルグラン（東京都渋谷区）が、総選挙2日前の6月4日に発表した「データで予測する2012年第4回AKB選抜総選挙」がそれだ（図）。大島優子のセンター返り咲きはもちろんのこと、前年の9位から4位に躍進した指原莉乃を大胆にも3位と予測するなど、かなり精度の高い内容だった。ちなみに予測が外れたのは、20位と予測した梅田彩佳が16位に飛び
東大、AWSによるビッグデータ解析で都市の人の流れを可視化
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます 災害対策、市場開拓に役立つ「人の流れプロジェクト」 空間情報科学というと、耳慣れない人も多いかもしれないが、ある領域の地理情報にまつわるデータを収集、蓄積、分析し、体系化する学問である。空間情報科学から得られる知見はさまざまな分野に応用される。代表的なものの一つが、調査データから都市圏などでの人の流れ、動線をつかみ、都市整備やビジネスに役立てる試みである。 マスの人の流れをつかむことは、災害時の効率的な避難シミュレーションや、混雑解消などに役立てることができるし、屋外広告や新しい商圏開発にも欠かせない。2007年には、地理空間情報活用推進基本法が公布、施行され、国をあげて地理空間情報の活用を推進する動きも出ている。 東京大学空間情報科学
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
8 Reasons Big Data Projects Fail | InformationWeek
大規模サイトを支えるビッグデータプラットフォーム技術
サービス終了のお知らせ
TechCrunch | Startup and Technology News
ビッグデータ時代の本格到来にどう備える - ビッグデータ - TECHNOLOGY - CIO Online
http://www.nri.co.jp/publicity/mediaforum/2012/pdf/forum174_1.pdf
http://analytics.theiegroup.com/bigdata-sanfrancisco
