自社のデータは公開したくないが、他社を含めてより多くのデータを集めて市場を分析したい――。そんな「虫の良い」ニーズを満たす技術をNTTが開発した。データを暗号化したまま「秘密計算」する。ビッグデータの重要性は広く認識されているが、プライバシーや機密保持などの観点からも思うようには利用が進んでいない。新技術は日本のデータ活用の新たな可能性を開く可能性がある。「計算の途中などでデータを盗まれること
「BigQueryは120億行を5秒でフルスキャン可能」は本当か? 先日、kaheiさんがGoogle BigQuery(Googleクラウドの大規模クエリサービス)について、こんなエントリを書いていた。 とにかくパフォーマンスがすごい。(Fluentd Meetupでの)プレゼン中のデモで、ディスクに収められた5億件のデータをSQLでフルスキャンするのに3秒しかかからない。9億件のデータを正規表現を含んだSQLでスキャンしても、7秒で終わる(これ、記憶がちょっとあいまい。もう少しかかったかも)。これには驚いた。佐藤さんがGoogleに入社して一番驚いた技術が、一般公開される前のBigQueryだったと言っていたが、その気持ちはわかる。 From Fluentd Meetupに行ってきました これを読んだ時、BigQueryの検索スピードについてちょっと補足したくなった。確かにFluent
ビッグデータの活用でバラ色の未来が来るといわれるが、本当か。 ビッグデータと聞くたびに、私は幼い頃に読んでドキドキした宮沢賢治の『注文の多い料理店』や、高校の英語の副読本で読んだジョージ・オーウェルの『アニマル・ファーム』を思い出す。 これらの小説ではヒトは家畜として扱われ、またそれこそが人間の本質だと教える。ビッグデータという技術は、便利な社会をつくる半面、小説に描かれていたヒトが家畜化した世界を現実化させるような気がする。 まずはモノや動物のチェックから ホンモノの家畜の世界では、新型インフルエンザなど疫病の管理が大きな課題になっている。鳥インフルエンザにしろ、BSE(牛海綿状脳症)にしろ、家畜の病気はやっかいだ。なにしろ飼い主の人間も家畜の親戚である。病気が移れば、ニワトリ1匹から始まって、何百万もの人が死亡しかねない。 ところが、家畜は食べ物であり、量産の対象だ。予防や治療に人間の
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く