タグ

Cloudとhadoopに関するtatsu00のブックマーク (4)

  • Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開

    Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開 Facebookでは、24時間ごとに0.5ペタバイトのデータが生成され、それらを分析するために毎日6万回以上ものHiveのクエリが実行されているそうです。 こうした大規模処理を行うプラットフォームとして使われているのがHadoop。しかしFacebookはHadoop MapReduceのスケーラビリティに限界を感じており、それを解決するための新しいソフトウェア「Hadoop Corona」を開発、オープンソースで公開しました。 Facebookのページ「Under the Hood: Scheduling MapReduce jobs more efficiently with Corona」では、従来のHadoop MapReduceのどこに課題があったのか、4つ

    Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開
  • ビッグデータブームを支えたHadoop、そしてNoSQL

    セキュリティアラート - phpMyAdminの脆弱性を狙った攻撃に要注意! MySQL管理者にはおなじみの管理ツール「phpMyAdmin」の脆弱性を狙った攻撃が12月に入ってから急増しています。ラックが注意喚起のアラートを出しています。phpMyAdminのふるいバージョンを使っている場合、外部からの任意のアクセスコードが実行可能になりやすいとのこと。 対策としては、まずphpMyAdminバージョン3.3.10.2または3.4.3.1以上へのアップグレード(最新バージョンは3.4.8)を実行を推奨します。phpMyAdminは外部からアクセス可能な状態にする必要がないので、できれば外部に対して公開しないか、アクセス可能にするならApacheのアクセス制限機能を使ってアクセス制限を行うようにしてください。 あの"象"第2版が電子書籍でも購入可能に 先週の週報で谷川チーフが「今年のIT

    ビッグデータブームを支えたHadoop、そしてNoSQL
  • 「ビッグデータとは?」から「ビッグデータ、どう使ってる?」へ―2012年DB Online的年頭所感

    2012年はビッグデータから さて、今年はデータベースを取り巻く世界で、いったいどのような変化が起きるのでしょうか。昨年末にも指摘しましたが、「ビッグデータ」がその1つのキーワードになることは間違いないでしょう。昨年まではビッグデータとはなんぞや、ということが話題の中心だったかと思います。今年は、より具体的にビッグデータを活用するとはいったいどういうことなのか、さらにはビッグデータと既存システムをどう連携させ既存ビジネスプロセスの中で活用すればいいのかといったことが話題になると考えています。 ビッグデータを扱うためのテクノロジーももちろん重要ですが、ビッグデータそのものを自社のビジネスプロセスの中でどう扱えば新たな世界が開けるかを考えるでき時に。そうなると、あらためてBusiness IntelligenceやBusiness Analyticsといったことに注目する必要もありそうです。と

    「ビッグデータとは?」から「ビッグデータ、どう使ってる?」へ―2012年DB Online的年頭所感
  • OracleはCloudera推し! 2012年のビッグデータはHadoop中心に回っていく!?

    【お詫び】稿掲載当初、執筆者の誤認により、記事中に数カ所の誤った記述がありました。ご迷惑をおかけした読者の皆様並びに関係各位には深くお詫び申し上げます。 この年末年始、やはりデータベース周りの話題はビッグデータを中心に回っているようです。とくにHadoop関連が騒がしい感じ。そこで今回の週報はHadoopネタを中心に届けします。 Hadoop 1.0.0がリリース 先週の話題というより昨年の話題になってしまいますが、12月27日にはApache Hadoop 1.0.0がついに登場しました。7年という長い開発期間を経てのリリースということもあり、世界中のIT関係者が大きな期待を寄せています。>> リリースノート これまでの0.2系からの最大の強化ポイントはやはりセキュリティのようです。HBase、webhdfsのサポートも含まれます。また、パフォーマンスに関してもいくつもの改良が実施され

    OracleはCloudera推し! 2012年のビッグデータはHadoop中心に回っていく!?
  • 1