タグ

2012年11月14日のブックマーク (3件)

  • Facebook、スケーラビリティを強化したスケジューリングツール「Corona」をオープンソース化

    Facebook、スケーラビリティを強化したスケジューリングツール「Corona」をオープンソース化:MapReduceの限界を独自開発で解決 データが大きくなりすぎてMapReduceのジョブトラッカーが死亡? そんな課題に対応するため、Facebookはジョブスケジューリングツールをゼロから構築、公開した。 米Facebookはユーザーベースの拡大に伴って生成される大量のデータ処理に対応するため、新しいスケジューリングフレームワークの「Corona」を開発し、11月8日にオープンソースとして公開したことを明らかにした。 Facebookはこれまで、データインフラ基盤としてApache HadoopのMapReduceを採用してきた。しかし、データウェアハウスで生成されるデータが24時間あたり0.5ペタバイトを超え、Hiveクエリの処理は1日当たり6万を超える中で、2011年初めごろから

    Facebook、スケーラビリティを強化したスケジューリングツール「Corona」をオープンソース化
  • iPhoneのカレンダーをきちんと「日本仕様」にする方法 | ライフハッカー[日本版]

    iPhoneに標準ではいっているカレンダーをスケジュール管理等で使用されている方って結構多いと思いますが、なにかちょっとした不便さを感じませんか? そう、デフォルトでは日の祝日がわからないんですよね。これでは予定を入力するにも不便でしょうがないですよね。 でも実は簡単に日の祝日を追加することができるんです。AppleのサイトではiPhoneのカレンダー用のデータを公表しているのですが、その中に日の祝日のデータがあり、これを使えば簡単にiPhoneのカレンダーに日の祝日を追加することができます。 1.iPhoneのsafariからこちらのページにアクセスし、ダウンロードをタップ。 2.下記メッセージが表示されるので、「照会」をタップ。 3.次に下記メッセージが表示されたら、「完了」をタップで終了。 これでカレンダーの予定を確認すると、祝日が追加されるようになります。 なお、左上の「カ

    iPhoneのカレンダーをきちんと「日本仕様」にする方法 | ライフハッカー[日本版]
  • Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開

    Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開 Facebookでは、24時間ごとに0.5ペタバイトのデータが生成され、それらを分析するために毎日6万回以上ものHiveのクエリが実行されているそうです。 こうした大規模処理を行うプラットフォームとして使われているのがHadoop。しかしFacebookはHadoop MapReduceのスケーラビリティに限界を感じており、それを解決するための新しいソフトウェア「Hadoop Corona」を開発、オープンソースで公開しました。 Facebookのページ「Under the Hood: Scheduling MapReduce jobs more efficiently with Corona」では、従来のHadoop MapReduceのどこに課題があったのか、4つ

    Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開