タグ

SSTableとbigtableに関するyassのブックマーク (3)

  • GoogleのBigtableがなぜスケールするのか、などについて識者の議論 - Publickey Topics

    New Custom Timeline 保存版の議論。はじめてTwitter Custom Timelineを作ってみたけど、めんどくさいね。 Permalink | Tag: Bigtable , Google About Publickey Topics 「Publickey Topics」は、エンタープライズIT、クラウド、Web標準などのトピックスを紹介するキュレーションメディアです。 ブログメディア「Publickey」を書くために集めた情報を基にしています。 Publickey Topicsの新着情報をチェックしませんか? Twitterで : @Publickey RSSリーダーで : Feed Blogger in Chief Junichi Niino(jniino) IT系の雑誌編集者、オンラインメディア発行人を経て独立。新しいオンラインメディアの可能性を追求しています

    GoogleのBigtableがなぜスケールするのか、などについて識者の議論 - Publickey Topics
  • Google 技術講演会に行ってきた

    Google 技術講演会に行ってきた Permalink URL http://www.magicvox.net/archive/2007/02062254/ Posted by ぴろり Posted at 2007/02/06 22:54 Trackbacks 関連記事 (0) Comments コメント (1) Post Comment コメントできます Category 先日2月2日、渋谷セルリアンホテルで行なわれた Google 技術講演会を聴講してきました。Google Japan でソフトウェア エンジニアをされている3名の方から夫々興味深いお話しを聞くことができました。講演の後は気さくな軽パーティもあって、Google Japanの社員の方々ととても充実した時間を過ごせました。 目次 講演メモ 講演メモ - 南野 朋之さん 講演メモ - デリック トングさん 講演メモ -

    Google 技術講演会に行ってきた
    yass
    yass 2013/09/29
    "SSTable immutable/操作はmutable/B-Treeで実装/write時:write bufferに書き込→一杯になったらGFSにフラッシュ/read時:write bufferを走査→なかったらGFSに問合せ/2006年8月時点サーバ24000台 60PJ以上 最大のtablet=800TB 10Billion Logs 秒間100万 数GB/s"
  • Google の大規模データ処理: Days on the Moon

    Google の鵜飼文敏さんによる講演会「大規模データ処理を可能にする Google技術」に行ってきました。内容的には筑波大学で開かれたものと同じではないかと思います (「新ビジネスモデル」がそのままだったことなどから)。以下、上記記事に載っていないことを中心にメモから抜書きを。 此頃 Google にはやる物 現在 Google では Google の使命 (Google's mission is to organize the world's information and make it universally accessible and useful...) の早打ちが流行中。鵜飼さんは 50 秒程度、一番速い人は 30 秒程度。 Google の扱う情報 Google のいう「情報」はインターネット上のものだけに限らない (例: Google ブック検索)。 データセンター

    yass
    yass 2013/09/29
    " データの分析は単純なもの (合計、最大値、最小値、上位 k 個、フィルタリングなど) がほとんどで、DBMS の高度な機能は必要ない。 これらの分析処理は可換的、結合的なため処理順は任意 / Bigtable / 毎秒 100 万 Read/Write "
  • 1