タグ

2009年9月24日のブックマーク (2件)

  • Webクローラーのクラウド型サービスを提供する「80legs」 - [モ]Modern Syntax

    今回のモダシンラジオはここ最近観た映画について一人語りする回です。以下の8映画について15分弱でさらっと喋ってみました。15分で8なんでほんと「さらっと」なんですが、「マダム・ウェブ」以外は全部オススメです(「マダム・ウェブ」もそんなに悪くないけど)。 ・ボーはおそれている ・ストップ・メイキング・センス 4Kレストア ・劇場版ハイキュー!! ゴミ捨て場の決戦 ・落下の解剖学 ・コヴェナント 約束の救出 ・マダム・ウェブ ・犯罪都市 NO WAY OUT ・ARGYLLE/アーガイル さて、モダシンラジオのデータをホスティングしてもらっているSpotify for Podcasters(旧Anchor)の私のページはこちらです。 https://podcasters.spotify.com/pod/show/kazuyoshi-nagasawa このSpotify for Podca

    knack
    knack 2009/09/24
    機能的には、 1.優れたパフォーマンス:20億ページ/日のクローリング能力 2.簡単に使え、しかも高いカスタマイズ性を提供:数分で独自クローラーを作成可能 3.手頃な価格:$2/百万ページ、 $0.03/CPU-Hour
  • グーグルのBigtableが耐障害性を強化、Megastoreレプリケーションで

    グーグルGoogle App EngineやGoogle Appsのデータベースなどのデータベースとして利用しているのが、「Bigtable」と呼ばれるキーバリュー型ストアです。 グーグルは以前からこのBigtableを複数のデータセンターにまたがって運用し、万が一障害が発生したとしてもデータを失うことがないように、データセンター間のバックアップなどを行ってきました。 しかし、先月の記事「データセンターが「落ちる」ことを想定したグーグルのアーキテクチャ」で紹介したように、グーグルといえどもこうしたデータセンターにまたがるデータベースを安全に運用する方法については試行錯誤しており、7月には6時間にわたり大規模なデータベースの障害を引き起こしていたことは、「Google App Engineにデータストアの障害発生。復帰まで約6時間、原因は現在も不明」で紹介しました(この件については後日、原

    グーグルのBigtableが耐障害性を強化、Megastoreレプリケーションで
    knack
    knack 2009/09/24
    実は、Megastoreへのマイグレーションはすでに完了しています。9月22日午前5時(米国時間)に作業が予定されており、無事に終了したようです。今後、Google App EngineやGoogle Appsはより安全に利用できることになるのでしょう。