タグ

interviewとhadoopに関するshimookaのブックマーク (3)

  • MapReduceは「ゆっくり死んでいく」、Hadoop開発者のカッティング氏

    オープンソースソフトウエア(OSS)の分散データ処理ソフト「Hadoop」が、大きな変貌を遂げ始めている。バッチ処理だけでなく、SQLクエリーを使ったインタラクティブ分析やインメモリー処理、機械学習処理などへと適用領域を広げているからだ。Hadoopのオリジナル開発者であるダグ・カッティング氏は、「新しい時代が始まった」と語る。 現在のHadoopの状況をどのように見ているか? 同じような機能を備えたコンポーネントが複数提案されるなど重複はあるが、技術開発は非常に高速に進んでいる。(米Apacheソフトウエア財団が2013年10月に正式版をリリースした)スケジューラーの「YARN」によって、(Hadoopのストレージシステムである)「HDFS」の上に、様々なテクノロジーを共存できるようになったことが大きい。私が特に驚いているのは、(DAG:Directed Acyclic Graph=有向

    MapReduceは「ゆっくり死んでいく」、Hadoop開発者のカッティング氏
  • 「ビッグデータですべてが解決できる」は誤解--Teradata ブロブストCTO

    印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます 2012年後半から「ビッグデータ」というキーワードが日社会に浸透しつつある。経済誌でもビッグデータに関する記事が掲載され、テレビのニュースでも取り上げられた。ある雑誌では「2013年はビッグデータ競争元年」とする特集を組んだ。 ZDNet Japanでは、2011年8月から特集「ビッグデータとは何か--課題と機会、ベンダーの戦略」を掲載。それに先立つ2010年10月に初めてビッグデータに関する記事を掲載している。この記事は、データウェアハウス専業の米Teradataのユーザー企業が主催するイベントの基調講演に関するものだった。 ビッグデータを解析することで、従来は気付けなかった傾向や法則を明らかにし、マーケティングや経済、医療、セキュ

    「ビッグデータですべてが解決できる」は誤解--Teradata ブロブストCTO
  • “統計の基礎を無視している”Hadoop使いが考えるビッグデータ

    Hadoopをバッチ処理の高速化に活用しているノーチラス・テクノロジーズは、ビッグデータのブームに真っ向から異論を唱える。「ビッグデータは中身のないバズワード」と断言する代表取締役社長 神林飛志氏に、その真意を聞いた。 Hadoop=ビッグデータは大きな誤解 ノーチラス・テクノロジーズは、基幹系システム向けのミドルウェアを手がける国産ベンチャー。Webサービスのように決して派手ではないが、「そもそもダウンすると、飛行機が飛ばないとか、病院で人が死んでしまうとか、電車が動かないとか、生活に影響が出る分野」(神林氏)という、まさにミッションクリティカルな領域のITで、同社の製品は活用されている。 同社の「Asakusa Framework」は、Hadoopを活用した分散処理により、基幹系バッチの高速化を実現する。神林氏は、「Hadoopというと、WebやSNS系、BIやデータ解析での使い方がメ

    “統計の基礎を無視している”Hadoop使いが考えるビッグデータ
    shimooka
    shimooka 2012/05/09
    なるほど
  • 1