スパコン「京」後継機、名称は「富岳」に決定
理化学研究所は5月23日、スーパーコンピュータ「京」の後継機の名称を「富岳」（ふがく）に決めたと発表した。2021年ごろに運用を始める予定で、京の最大100倍の実行性能を目指す。富岳は「京」と同様、理研 計算科学研究センター（神戸市）に設置する。 理研は今年2月、京の運用を8月に終了すると発表し、後継機の名称を公式Webサイトで募集。5181件の応募があったという。理研の松本紘理事長は「創薬や防災を発展させる上で必要なシミュレーションに加え、AI、ビッグデータ分析の基盤として活躍すると確信している」と語った。 富岳は「富士山」の別名。富士山のように高く（性能が高く）、裾野が広く（対象分野が広く）、海外での知名度も高くなってほしい――などの理由から名付けた。各国のスーパーコンピュータの名称は山にちなんだものが多く、発音がしやすいことも考慮したという。 その他の候補は「穹」（きゅう）、「叡」（
「ノンスキル事務系会社員が個人でも勝てる」ビジネスを見出すための6+1つの条件 - herrlichtの日記
こんばんわ、herrlichtです。へアリヒトと読みます。 前回の記事で、会社組織が新規ビジネス開発をする際に背負っている強烈な制約として、「売上高数億円以上の規模を確保しなければ新規ビジネスとしてペイしない」点を指摘し、その制約を突くことで、個人でも企業との競争に負けない（晒されない）、しっかりとした収益性のあるビジネスを作り上げることが可能だよ、というお話をしました。 一方で、個人での新規ビジネス開発も、会社組織とは別の、しかし同じくらい強烈な制約を背負っています。ここをしっかり認識しておかないと、後でイタイ目にあうことになります。今日は、会社組織が新規ビジネス開発をする場合と比較して、個人が新規ビジネス開発をする上で直面する制約条件がどのようなものであるのか、というお話をしていきたいと思います。 ちなみに、制約というと響きが悪いですが、人間の頭は全くの自由の中で何かを思考するのは空っ
データセンターなんでもランキングmonthly（2023年4月） 「4kVA以上が使える」ラック料金ランキング掲載開始！データセンター選択の際にポイントとなる各種指標をランキング形式で紹介
【自戒】こんな組織じゃオワコンだ。と、ミラティブ社で意識・実践している16のこと【逆張り】｜akagawa.junichi 赤川隼一
＊当記事は、登壇資料の補足記事である。長文につき、時間がない方はこちらの資料のみ版だけでもご参照いただけると嬉しい。 週末、「エモさが作る組織」というテーマでフジテレビのプライムニュースαにミラティブ社を特集いただいた。 ちょっとエモフォーカスで実態よりだいぶ陽キャっぽく見える感じだったけどｗ、ミラティブはとにかくエモい会社にしたいと思って作ったのは事実だ。 先週はセガから元取締役CSOの岩城さんを迎え入れる発表をしたこともあり、まだまだながら「組織力」についてForbesに記事にしてもらったタイミングでもある。 「採用候補者様への手紙」もミラティブなりの正直な組織の現状をつづったものだ。 そんな折、登壇で「思考法」をテーマにお題をいただき、ちょうど最近の考えをまとめたので、outputしておく。 （何かに時間を使ったらとにかく最大限活用したいケチな性格なのだ…） 資料中にもあるが、登壇資
長文日記
佐藤 大輔 オープントーン @satou_ot 社長を20年もしていると。それなりに「金を経理にパクられて」消える会社を見ていますが。 １．一番安いプランでいいいからファームバンキングを入れろ（月1000円とか） 2.高額な資金決済移動は自分が承認（OKおすだけ）しろ。 これだけで、殆ど防げます。 2022-07-06 12:22:20 佐藤 大輔 オープントーン @satou_ot プチバズっているのでCMぶら下げ。 日々数万人が利用する出退勤クラウドサービスをしていますが。それらのビッグデータ解析をして提供するサービスを開始しています。IC勤怠管理ともどもデータ解析サービスも宜しくお願い致します。 prtimes.jp/main/html/rd/p… 2022-07-06 17:41:38
https://flic.kr/p/os8Taq 要約：AWSは素晴らしいが、Googleはその グーゴル 倍素晴らしい。 AWS re:Invent （参加料は1,600ドル）に参加したり、チーフ･エバンジェリストの Jeff Barr をフォローしたりすれば、あなたはたちまち、Amazon Web Servicesのとりこになるでしょう。 毎年何百もの新機能が登場しており、食べ放題・融通が利く・運用担当者不要の、オンデマンドサービスのビュッフェのようです。まあ、実際に食べてみるまでは、の話ですが…。 Amazonは素晴らしいです。しかし、Google Cloudは「開発者によって、開発者のために構築された」ものであり、それが一目で分かるのです。 移行した理由 App Engine GAE はきちんと機能し、オートスケーリング機能も持ち、ロードバランサや無料のmemcacheも備えていま
若き経済学者のアメリカ
もちろん僕はそういうアツさが決してキライではない。だから確かに一読の価値はある内容だとは思う。ただ、「これからの10年で最もセクシーな職業」というハル・ヴァリアンの有名な台詞に言及してはいるものの、本書の中身からは統計学のセクシーさが最後まで伝わって来なかったのが、個人的にはとても残念でならない。 以下の３冊と比肩するくらいの、セクシーでワイルドでエキサイティングな統計学書が登場したかと思ったのだが、果たしてそれは期待し過ぎだっただろうか。
こんにちは.野球(とグルメ)の人です.*1 ビックデータや統計学が相変わらずアツい話題になっている中,野球好きとデータ好きをうならせるこんな本が出版されました. [プロ野球でわかる! ]はじめての統計学 作者: 株式会社DELTA,佐藤文彦,student,岡田友輔出版社/メーカー: 技術評論社発売日: 2017/03/14メディア: 単行本（ソフトカバー）この商品を含むブログを見る この本,早速読ませてもらってとても良い！感銘を受けた！！という感じなのですが, そもそも世の中に野球統計学(セイバーメトリクス)の本が増えてきた (野球好きでも)初心者がいきなり読んだら辛い本もあるぞ！ ？？？「ワイも野球データを集めて分析したいンゴ」 …などなど,クエスチョンやテーマができたので, 今まで学んだ・実践した野球統計学の学び方・本・データを整理するのにいい機会だ！ …ということで, レベル別の本
＠ITイベントカレンダー
平素よりイベントカレンダー＋ログをご利用いただき、誠にありがとうございます。 イベントカレンダー＋ログは「IT・製造業・ビジネス関係のイベント（セミナー・展示会・勉強会・コンテスト・Webイベントなど）を開催する企業・コミュニティが登録したイベント情報のポータルサイト」として約7年間運営をしてきました。これまでサービスを続けることができたのは、イベントカレンダー＋ログのコンセプトに共感をいただき、適切なイベント情報をお寄せいただいた皆さまのご支援があったからこそと考えております。重ねて御礼申し上げます。 しかしながら、イベント情報の入手方法の多様化やイベント紹介サービス市場の状況、＠ITの今後のメディア運営方針などを検討した結果、2020年6月30日（火）15:00をもちましてイベントカレンダー＋ログのサービスを終了することにしました。 これまでご利用をいただきました皆さまには残念なお知ら
言語データの分析と応用のために自然言語処理と呼ばれる分野で長年研究が行われて来た。同分野が昨年から大きく沸き立っている。米グーグルの研究者であるトマス・ミコロフ氏らが提案した手法「Word2Vec」が、いくつかの問題について従来のアルゴリズムよりも飛躍的な精度向上を可能にしたのだ。 この手法によって得られるベクトル空間には、今まで定量的に捉えることの難しかった言葉の「意味」を極めて直接的に表現しているかのような性質が認められている。今年9月、当社がスポンサー参加した自然言語処理系の研究発表会「NLP若手の会 第9回シンポジウム」でも、多くの研究がWord2Vecに関連したテーマについて取り上げていた。今後、意味解析、文書分類、機械翻訳など様々な分野でWord2Vecの応用が期待されている。 「意味ベクトル」の驚異的な性質 Word2Vecは、その名前の表す通り、単語をベクトル化して表現する
jQuery TrickshotsはjQueryを使った100のテクニックとそのサンプルを配布するプロジェクトです。週1で届くTutorialzineのニュースレターを購読する事でダウンロード出来るようになっています。中身は上図のようにソースコードと実装エリアが用意されており、その場で編集し、任意のコードを試せるようになっていました。また、電子書籍版も同梱されています。内容の目次があるのでチェックして見ては如何でしょうか。 jQuery Trickshots
先週、今週とあちこちへ出張が続いているので、移動時間の合間、ネットが途切れる山奥にさしかかったあたりで東浩紀「訂正可能性の哲学」を読んだ。東さんの本はいつもそうなのだが、あまりの内容に驚愕した。 そして昨日はたまたま東さんにVisionProを体験させる約束をしていた日なので、会う前に一気に読み終えた。すごい。もっと早く読めばよかった。 東さんの本は基本的に「凄すぎる」ので、読むと影響を受けすぎてしまってしばらく自分の思考が戻ってこない状態になる。しかし最近の僕は、むしろ忙しすぎて誰かの思考を取り入れたいモードになっていたのだ。 その意味で、まさに今の時代に必要とされている本だと思うし、本当にすごい。10年前に上梓された「一般意志2.0」の続編でもあり、なおかつアップデートでもある。もちろん読んでなくても全然良い。 特に舌を巻いたのは、落合陽一の「デジタルネイチャー」や成田雄介の「無意識デ
大容量テキストマイニングでは、より多くの文字数のテキストからワードクラウドを作成できます。 サンプル： 銀河鉄道の夜 例文）話した内容を自動でテキスト化してくれる音声入力機能がつきました。マイクをONにして、まず「音声認識を開始」ボタンを押して話したあとで「テキストマイニングする」ボタンを押してください。初回利用時に「マイクを使用する」というメッセージが表示された場合は「許可」ボタンをクリックしてください。パソコン内蔵マイクでも利用できますが、外付けマイクを利用したほうが音声認識の精度がアップします。
fluentd + mongodb+ node.js でリアルタイムにグラフを描く - stanaka's blog
追記 2/22 毎回微妙に追記していますが、今回も追記です。最後にmongodbのinsert性能について80lines/secで厳しくなった、と書いてますが、環境か設定まわりがあやしいので訂正します。もうすこし検証してみようと思います。 → 検証して fluentd側の設定の問題であることが分かりました。詳しくは、http://blog.stanaka.org/entry/2013/02/22/171053 追記ここまで 最近は、fluentd + mongodb でログを蓄積していろいろ便利に使っているわけですが、数分に一回集計スクリプトを周したり、 GrowthForecast の画面をリロードしまくるのではなく、もっとリアルタイムで見たい! という欲求が募ってきたので、 node.js を使って実装してみました。( https://github.com/stanaka/realti
教育について考えるヒト向けのお話です。 当ブログにしては珍しく辛辣なコトバを含むので、そういうのがお嫌いな方はそっ閉じを推奨します。 ※コウモリがブチギレするテーマの１つなので、ご了承くださいm_ _m 追記。一晩寝た後にブコメを見て、一部の表現を柔らかくしました。ご指摘ありがとうございますm_ _m 経緯をざっくり ちきりん女史の教育についての提案記事が話題になっています。 →下から7割の人のための理科＆算数教育 - Chikirinの日記 コウモリ自身は、この主張に賛成できる部分が多いです。もちろん、100％全部賛成というわけではありません。けれど、塾講師として実際に小中学生に算数・数学を数年間教えた身としては、「たしかに台形公式なんか要らないよね」とも思うし、「義務教育の内容はもう少し考え直すべきよね」とも思うからです。 その一方で、「ちきりん女史の意見はおかしい！」という意見もあり
TL;DR これは、このブログの本題とは何の関係もない僕自身の回顧録にして懺悔録であり、見ようによっては怪文書です*1。故に、記事中には何の参考になる内容も書かれていないことを予めお断りしておきます。それでも良いという方だけ、この先をお読みください。ただしTL;DRと書いた通りで、超長文につきご注意を。 当時から7年が経ち、この中に登場する人物の中には既にリタイアしている人もいれば、物故している人もいます。ある意味もう時効だろうということで、その時起きたことをつぶさに書いてみることにした次第です。 研究者を辞めた時のこと 研究者の道を目指した理由 正直言って無能だったが、勉強だけは熱心なポスドクだった ポスドク待遇改善運動、研究体制改革運動を経て、業界では知らぬ者のないお尋ね者になった そしてポスドクをクビになり、国内に行き先がなくなった 土壇場でシンガポールでのjob talkに招かれた
9時間足すんだっけ引くんだっけ問題～あるいは、諸プログラミング言語はいかにタイムゾーンと向き合っているか - エムスリーテックブログ
私は日付時刻の処理が大好きです。 タイムゾーンの問題でデータ抽出が9時間分漏れていたとか、朝9時の始業前のログが昨日付けになってしまっていたなんていう問題が起こると喜んじゃうタイプ。 そんな私にとって、各プログラミング言語が標準で持っている日付時刻型クラスにはそれぞれ思うところがあり、今日はちょっとその品評会をしてみたいと思います。 エムスリーエンジニアリンググループ、Unit1（製薬企業向けプラットフォームチーム）三浦(@yuba@reax.work) [記事一覧 ]がお送りいたします、エムスリー Advent Calendar 2023の2日目です。 至高の日付時刻型を持つ言語、BigQuery SQL 不足はないが蛇足、Java 8 日付時刻で画竜点睛を欠いたC# C#よりややまし、Python 型は良い構成、なのに命名と処理関数で損しているPostgreSQL まとめ We ar
ビッグデータツールチェインのセキュリティはビッグリスク、あるいは、誰もHadoopをスクラッチからビルドする方法を知らない件について
ビッグデータツールチェインのセキュリティはビッグリスク、あるいは、誰もHadoopをスクラッチからビルドする方法を知らない件について The sad state of sysadmin in the age of containers コンテナー時代のシステム管理者の惨状 システム管理は惨劇に見舞われている。現状は悲惨だ。 筆者は昔気質のシステム管理者に不満はない。システムの稼働を維持し、アップデートし、アップグレードする方法を知っている者達だ。 この憤りは、コンテナーと構築済みVMと、それらがもたらす、「信頼」や「アップグレード」の欠如による悲惨な惨劇に対するものだ。 例えば、Hadoopを見てみろ。誰もHadoopをスクラッチからビルドする方法を知っているようには見えないぞ。依存性とバージョンとビルドツールが悲惨なほどに絡まりあっている。 この手のイケてるツールの中で、古典的なmake
Azure Machine LearningとIoTを駆使して室温予測システムを構築してみた - がりらぼ
はじめに 今回は自宅の室温予測システムを構築してみました。 前回はいろいろテキトーに書いてたので今回はかなりまじめに書いていきます。 イメージとしてはNHKのNextWorldで描かれてる世界 それをできるだけAzureを駆使して構築してみたいと思います。 システム構成図 システムの構成図はこんな感じ Arduinoで室温を計測 ↓ Azure Mobile Servicesに送信 ↓ SQL Azureデータベースに貯めこむ ↓ そのデータを使ってAzure MLであらかじめデータの傾向を学習しておく ↓ Mobile Service Schedulerで毎朝8時にAzure MLからその日の室温の予測値を取得してTweet ↓ Mobile Service Custom APIを使ってWindowsストアアプリに今日の室温予測値を表示 という感じでいきたいと思います。 データ計測部 I
ビッグデータの本質はデータの大きさではない - ニューロサイエンスとマーケティングの間 - Between Neuroscience and Marketing
Leica M7, 1.4/50 Summilux, RDP III @Griffith Observatory, Los Angels, CA 残念なことに、全く忘れていて風呂に入っていたのだが、期せずして先日取材を受けたNHKスペシャルの「医療ビッグデータ」に、先ほど何秒か登場していたようだ。 それでそのリアルタイム検索結果*1を見ていたのだが、そこで扱われていたデータがビッグデータかどうかというツイートが結構な量であることに驚いた。ビッグデータの特徴として3V（Volume, Variety, and Velocity）と言った言葉が広まってしまっているせいもあるだろう。（自分も時たま使ってしまうので今回反省している。） この方々の気持ちはわかるが、このブログの読者の方々ならお気付きの通り、今起こっている変革の本質はデータが巨大かどうかということではない。 ― 現在起こっている変革の
1. Mobility Technologies Co., Ltd. Data Engineering Study #2 データ収集の基本と 「JapanTaxi」アプリにおける実践例 株式会社 Mobility Technologies 渡部 徹太郎 2020/8/19 2. Mobility Technologies Co., Ltd. 自己紹介 2 ID ：fetaro 名前：渡部 徹太郎 学生：東京工業大学でデータベースと情報検索の研究 (@日本データベース学会) 職歴： * 野村総合研究所(NRI) - オンライントレードシステム基盤 - オープンソース技術部隊 * リクルートテクノロジーズ - ビッグデータ分析基盤 * MobilityTechnologies - データエンジニア エディタ：emacs派→ InteliJ派 日本AWSユーザ会(JAWS) ビッグデータ支部長
南海トラフ巨大地震は確実にやってくる。問題はそれがいつ起きるかだ。海外で発表された論文は、その予知が実現する可能性を示していた。日本政府・学界が及び腰の予知研究の最前線がここにある。 サインは見過ごされていた 「この現象が、ほとんどの大地震の前に起こっているということを認識していれば、東北の大地震(東日本大震災)の2日前にM7・3の地震が起きたとき、日本の専門家たちは、次に巨大地震が来る可能性を事前に警告することができたのではないかと思います」 1811年に創設されたフランスの名門校ジョセフ・フーリエ大学の研究者ミシェル・ブション博士は、こう無念さをにじませた。 実はいま、ブション博士らの発表したひとつの論文が、日本の地震研究者や政府関係者の顔色を失わせている。論文の内容が、 〈巨大地震の前兆は、既存の観測態勢で、特段新しいことをしなくても見つけられたはずだ〉 ということを意味するものだっ
研究用にニコニコ動画のコメント約300GBを公開‐ニコニコインフォ 情報学研究データリポジトリ ニコニコ動画コメント等データ 国立情報学研究所のダウンロードサービスでニコ動のデータセットが公開されていたので、とりあえずダウンロードしてみました ダウンロードの手順 以下のページで、名前、メールアドレス、所属を入力すればよいみたいです。 情報学研究データリポジトリ ニコニコ動画コメント等データ 申請 データの形式 行ごとにそれぞれの動画のjsonが書かれたファイルがたくさんあります。 コメントのデータもありますが、ユーザーに関する情報はないみたいです 動画の説明などには<b></b>や<font></font>、<br />などのHTMLタグが含まれていましたので、それらの除去が必要になりそうです タグの頻度 なんか面白いことできないかなーと考えたんですが、何も思い浮かばなかったので、とりあえ
素人流：コンピュータ・サイエンスの基本知識を取り揃える書籍 - HELLO CYBERNETICS
はじめに データ構造のアルゴリズム コンピュータ・アーキテクチャ ネットワーク セキュリティ ソフトウェア工学 最後に はじめに 謎のタイトルを掲げていますが、実質は私の決意表明と書籍の紹介になりますのでご留意ください。 ちなみにこの記事ではコンピュータ・サイエンスのすべての分野に精通することは不可能だと思われるので（なんたって自分がその目処立っていないので）、あくまで初心者〜中級者向けということで勘弁してください。 データ構造のアルゴリズム これは中々奥が深い分野だと思われますが、この手の話は理屈を眺めていても私は中々頭に入ってこないタイプでした。どうしても内容に集中できないのです。「本当に意味あるんかしら？別にプログラムはこんなこと知らなくても書けるような…」なんて勉強しながら思っちゃうわけです。 そういう人にこそ下記の書籍がとってもおすすめ。 プログラミングコンテスト攻略のためのアル
フェイスブック・ショックの深度 - 日本経済新聞
19日の米国株式市場は総崩れとなった。ダウ工業株30種平均は前週末比335ドル安に沈んだ。フェイスブックを巡る個人情報の不正利用問題を巡る懸念を起点に「ビッグデータ」ビジネス全体へ波紋が広がった。IT（情報技術）企業の成長に依存してきた米株市場にとって問題は根深い。発端はイギリスに本社を置く政策コンサルティング会社、ケンブリッジ・アナリティカ。同社がフェイスブック上の個人情報を自らの政策アドバ
現代のスーパーコンピューターでは何千年もかかると言われる極めて複雑な計算を、わずか数時間で解くという、夢の超高速コンピューター「量子コンピューター」の実現に向けて、東京大学のグループが世界的に注目されている「量子テレポーテーション」と呼ばれる現象をめぐり、重要な成果を得たことがわかりました。超高速コンピューターの実現に欠かせない、情報の瞬間移動を無制限に繰り返せるようにする新たな技術の開発の成功で、グループではことしから大規模な計算を精度高く行うための研究を本格化させることにしています。 量子とは、物質のもとになる原子や光子などのことで、古澤教授はカリフォルニア工科大学の客員研究員だった１９９８年に、離れている二つの量子の間で情報を瞬時に伝える量子テレポーテーションと呼ばれる現象を起こすことに世界で初めて成功し、注目を集めました。 この量子テレポーテーションについて、古澤教授のグループが実
Cloudera Standard のご案内 ~ 無償版 大幅機能強化のお知らせ | Cloudera Japan
データを信頼し、AI を信頼する 信頼できるデータ、信頼できるモデル、信頼できる AI を実現するために、これほど多くのクラウドのさまざまなデータタイプを管理でき、オープンデータのイノベーションと大規模展開に対応できるプラットフォームは他にありません。
インフラ部 & 技術部の青木峰郎です。 クックパッドでは全社的にAmazon Redshiftを中心としたデータ活用基盤を構築しています。 今日はその全体像についてお話ししたいと思います。 データ活用基盤の全体像 まず、以下にクックパッドのデータ活用基盤の全体像を示します。 大きく分けると入力が2系統、内部処理が1系統、出力が3系統あります。 入力はMySQLからのインポートとログのロードがあり、どちらも独自に構築したシステムで行われています。 DB内部のデータ処理はSQLバッチのみです。 そして出力は管理画面やBIツールからのアクセスとバッチ処理によるエクスポートに大別できます。 以下1つずつ説明していきましょう。 入力その1: MySQLインポートシステム MySQLからRedshiftへのマスターテーブル取り込みにも独自のインポートシステムを使っています。 このインポート処理には、つ
データサイエンティストという職業の10年間の変遷を振り返る - 渋谷駅前で働くデータサイエンティストのブログ
(Image by Gordon Johnson from Pixabay) TL;DR 今年の6月に僕自身がデータサイエンティストに転じて10年という節目の年を迎え、10月でDavenportの「データサイエンティストは21世紀で最もセクシーな職業である」HBR総説から10周年になるのを機に、この10年間のデータサイエンティストという職業の変遷を振り返ることにしました。 6月の回顧録記事でも書いた通り、僕がデータサイエンティストの仕事に就いてから今年で10年になります。最近も同じかどうかは分かりませんが、古くから「10年ひと昔」という常套句がある通りで個人的には大きな節目の年だと感じています。 一方で、今年の10月にはあまりにも有名な「データサイエンティストは21世紀で最もセクシーな職業である」HBR総説が出てから10周年を迎え、後述するようにDavenportは「今もデータサイエンティ
スーパーやコンビニなどの防犯カメラで自動的に撮影された客の顔が顔認証で解析され、客の知らないまま、顔データが首都圏などの１１５店舗で共有されていることが４日分かった。 万引きの防犯対策のためだが、顔データを無断で第三者に提供することはプライバシー侵害につながりかねず、専門家や業界団体は「ルール作りが必要」と指摘している。 顔データを共有しているのは、名古屋市内のソフト開発会社が昨年１０月に発売した万引き防止システムの導入店舗。首都圏や中京圏のスーパーなど５０事業者計１１５店舗で、個人のフランチャイズ経営の大手コンビニなども含まれる。 各店舗は、防犯カメラで全ての客の顔を撮影。万引きされたり、理不尽なクレームを付けられたりした場合、該当するとみられる客の顔の画像を顔認証でデータ化した上で「万引き犯」「クレーマー」などと分類し、ソフト開発会社のサーバーに送信、記録される。他の店舗では顔の画像そ
MapReduceできる10個のアルゴリズム - データサイエンティスト上がりのDX参謀・起業家
HadoopとMahoutにより、ビッグデータでも機械学習を行うことができます。Mahoutで実装されている手法は、全て分散処理できるアルゴリズムということになります。Mahoutで実装されているアルゴリズムは、ここに列挙されています。論文としても、2006年に「Map-Reduce for Machine Learning on Multicore」としていくつかのアルゴリズムが紹介されています。 そこで今回は、（何番煎じか分かりませんが自分の理解のためにも）この論文で紹介されているアルゴリズムと、どうやって分散処理するのかを簡単にメモしておきたいと思います。計算するべき統計量が、summation form（足し算で表現できる形）になっているかどうかが、重要なポイントです。なってない場合は、”うまく”MapReduceの形にバラす必要があります。 ※例によって、間違いがあった場合は随時
世界最速レベルの性能を持つリレーショナルデータベース管理システム「劔（Tsurugi）」を開発― 処理性能456万TPSと応答遅延219ナノ秒を実現 ― 日本電気（株）と（株）ノーチラス・テクノロジーズはNEDOの「高効率・高速処理を可能とするAIチップ・次世代コンピューティングの技術開発」（以下、委託事業）において、世界最速レベルの性能を持つリレーショナルデータベース管理システム「劔（Tsurugi）」（以下、劔）を開発しました。 劔は、次世代のデータベースに用いられるハードウエア環境（メニーコア・大容量メモリーなど）に適合したシステムであり、ハードウエアの性能が向上するほどシステムの性能も高まる特性を有しています。32以上のコア数を有するハードウエアにおいては、世界最速レベルの処理性能456万TPSと219ナノ秒の応答遅延を実現しました。 劔の導入によって、複雑なバッチ処理とオンライン
YappoLogs: DeNA のノウハウが12個も馬鹿正直に書いてある「Mobageを支える技術 ~ソーシャルゲームの舞台裏~」を読んだ
DeNA のノウハウが12個も馬鹿正直に書いてある「Mobageを支える技術 ~ソーシャルゲームの舞台裏~」を読んだ 先週末くらいに届いて週末うっかり読むの忘れて昨日の夜にだいたい読み終わりました。 実際の発売日は明日からなので、今すぐアマゾンで予約するか明日本屋に並ぶといいよ！ なんていうか書評書くのが凄い難しいん素よねこの本、高層ビルの上層階のレストラン街のような感じで、それぞれの著者がそれぞれの業務に関して得た知見を惜しげもなくこれでもかって書いてるので、本全体としてはまとまり感が凄いないっていうw ガラゲーの話とかサービス終わってるDoCoMoのPDC端末の判定方法とか Flash とか FastCGI とか2012年に出る本らしからぬトピックスがあったりしますが、それが本当に今の DeNA/Mobage を支えている技術である事には間違いないので本当に馬鹿正直に、包み隠さず書籍化
ビッグデータの価格破壊？ Googleが「処理量100GB/月まで無料」の解析サービスBigQueryを提供開始 - ITジャーナリスト星暁雄の"情報論"ノート
情報と技術は未来をどう変えるのか──IT、スマートデバイス、ロボット、電子工作、メディアのアーキテクチャ Google勤務のKazunori SatoさんがGoogle+に簡潔な解説をポストしてくれています。 ポスト1 BigQueryが一般公開されました！数100億件の全検索が数十秒で完了する超並列クエリサービスで、MapReduceと並びGoogleの根幹を支える虎の子技術です。 Google BigQuery brings Big Data analytics to all businesses - Google Developers Blog ポスト2 BigQueryプチ解説：BigQueryはGoogle社内では「Dremel」と呼ばれる超並列クエリインフラを利用した一般向けサービスです。DremelはSybase IQやOracle Exadataと同様のColumar DB
DMM inside
なぜDMMがweb3に参入したのか。Seamoon Protocolが目指す新たなエンタメ体験の未来とは
日本社会のＩＴ（情報技術）高度化を支える人材育成が柱で、次期学習指導要領が始まる２０２０年度からコンピューターのプログラミング教育を小中学校で必修にするほか、外国人の専門家が日本に永住しやすくする。日本が官民一体で取り組む１０分野を具体的に掲げ、政府が目標とする２０年頃の名目国内総生産（ＧＤＰ）６００兆円の実現を図る。 新成長戦略は、１９日に開く政府の産業競争力会議（議長・安倍首相）で公表する。少子化でも経済成長を続けるため、ビッグデータや人工知能（ＡＩ）などを駆使する人材を育てて、生産性を高めることを目指す。 プログラミング教育としては、小学生には興味を持ってもらうための体験学習を、中学生にはホームページの作成などを想定している。産業界には、教材の開発や講師の派遣などで協力を求める考えだ。
Twitter apiのガイドラインが改定になるそうです。 Twitter API v1.1でのAPI利用ルールの変更について こちらの日本語ブログは当たり障りのないところしか書いてないので、関係者は英語の方を読むことを強くおすすめします。 Changes coming in Version 1.1 of the Twitter API どうしてもこういう制約が増えるものは、ネガティブが極大化するので、ちょっと冷静に見てきましょう。 ■すべてのapiのエンドポイントに認証が必要、さらにレートリミットの変更 現在、検索apiなどはOAuthの認証が不要で、IPアドレス毎に一時間あたりのアクセス数が定められていますが、これが廃止になり、2013年3月までに全てOAuth認証を通した方法に変更を求めています。 さらに、１時間毎にapiにアクセス可能な数が、apiの内容によって変わります。今までは
Dockerコンテナに開発環境を構築し、良質な開発者体験を維持した話 - MonotaRO Tech Blog
モノタロウのCRMグループでバックエンドエンジニアをしている新盛です。 モノタロウのCRMグループでは、主に顧客管理を中心に、フルスクラッチの基幹システムを運用しつつ、部分的にパッケージソフトや最新の技術を導入することで、増加する売上を支える事ができるシステムを目指して、システムのモダナイズに挑戦しています。 note.com モダナイズを進めると新技術を用いたシステムを取り扱う機会が必ず訪れます。従来の業務に支障なく、新しい技術を取り入れるためには様々な工夫が必要になります。 今回は引継ぎという場面で定常業務への影響をなるべく抑えて環境構築の容易化と開発者体験の両立を実現するためにDockerコンテナが活用できた話をします。 背景 課題 開発環境をDockerでコンテナ化するメリット Dockerコンテナを用いた環境構成 Dockerコンテナのシステム要件 DockerコンテナからDoc
2012年のアメリカ大統領選挙は、バラク・オバマ現職大統領の勝利に終わりました。アメリカ大統領選挙とは、いわば米国でもっとも巨大なマーケティングキャンペーンであり、明確な期限があり失敗できないプロジェクトの1つです。 今回のオバマ氏のキャンペーンで話題になったのは、ITの活用とその効果でした。 詳細を報じたTIME誌の記事「Inside the Secret World of the Data Crunchers Who Helped Obama Win」によると、オバマ氏の地元シカゴに置かれた選挙対策本部にある「The Cave」と呼ばれる部屋では、効果的な手を打つために各州の有権者のデータを統合、その嗜好や動向を把握、分析。その結果ジョージ・クルーニー氏の影響力が高いと判断して彼による食事会を設けて資金集めに成功したり、スイングステート呼ばれ、勝敗の鍵を握る激戦州での選挙結果をさまざま
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
さくらインターネット、GPUサーバーを時間課金で提供開始 | クラウド&データセンター完全ガイド
金を経理にパクられて消える会社がまあまああるが、対策は割と簡単なのでは
私たちがAmazon Web ServicesからGoogle Cloud Platformに乗り換えた理由 | POSTD
野球好きが統計学を覚える為の学習フローを作ってみました - Lean Baseball
自然言語処理に新風を巻き起こしたWord2Vecとは何か - 日経BigData
jQueryを使った100のテクニックとサンプルコードを一括配布している・「jQuery Trickshots」
東浩紀「訂正可能性の哲学」はAI関係者必読だ!｜shi3z
テキストマイニング 無料ツール by ユーザーローカル
教育を語るならトレードオフを見よう！ 経験学習ｖｓ系統学習 - 彼氏は日本人。彼女はフランス人。
研究者を辞めた時のこと、そしてその後のこと - 渋谷駅前で働くデータサイエンティストのブログ
データ収集の基本と「JapanTaxi」アプリにおける実践例
「南海トラフ巨大地震が来る」世界的科学誌『ネイチャー』に発表された驚愕の調査結果（週刊現代） @gendai_biz
ニコニコ動画のデータセットが公開されたらしい - 唯物是真 @Scaled_Wurm
量子コンピューター実現に不可欠な技術開発 東大 | NHKニュース
クックパッドのデータ活用基盤 - クックパッド開発者ブログ
客の顔情報「万引き対策」１１５店が無断共有：ＩＴ＆メディア：読売新聞（YOMIURI ONLINE）
世界最速レベルの性能を持つリレーショナルデータベース管理システム「劔（Tsurugi）」を開発
小中でプログラミング必修に…政府の新成長戦略 : 政治 : 読売新聞（YOMIURI ONLINE）
Twitter api ver1.1、痛いところ、痛くないところ
オバマ大統領の再選を勝ち取ったITチームは、どんなメンバーで構成されていたのか？