タグ

2015年5月13日のブックマーク (5件)

  • Riak 2.0のPlumtreeを読む — そこはかとなく書くよん。 ドキュメント

    Riak 2.0のPlumtreeを読む¶ 昨年のRiakアドベントカレンダーでしのはらさんが、 Riak 2.0 : クラスタ全体のデータ共有を効率 という記事を書かれています。 これによると、Riak 2.0ではgossip protocolに加えて Plumtreeという論文 をもとに実装されるツリー状の経路を通って通信するプロトコルが追加される とのことです。 紹介されている スライド を読んでいて興味が湧いてきたのでriak_coreを読んで みることにします。 ちなみにlogを見ると、2013年8月1日にこれらの変更が最初に入ったようです。 tl; dr;¶ Riak 2.0からgossipプロトコルが効率良くなるよ 10台以上から有効化されるよ 01/23追記: 間違いでした!常にplumtreeが使われていて、gossipを使うのは最初のtreeを作るところだけでした。 用

    kuenishi
    kuenishi 2015/05/13
    改めてplumtreeのはなし
  • 第4回 データ処理の方法 | gihyo.jp

    はじめに 前回までは、(⁠並列)データ処理の説明をするために必要な言葉の定義や整理をしてきました。いよいよこれからは、データ処理自体について触れていきます。今回は、アプリケーション開発者の視点から見るデータ処理にはどのようなものがあり、その観点において、Hadoopがどのようなものであるか、また、Hadoopがどのようにデータ処理を構築しているかについて、その概要を説明します。 手続き型言語によるデータ処理と宣言型言語によるデータ処理 データ処理は、データ処理を行うアプリケーション開発者(ユーザ)の視点から見ると、 手続き型言語によるデータ処理 宣言型言語によるデータ処理 の2つに大別することができます。 手続き型言語によるデータ処理は、ユーザがプログラミング言語等を用いて行うデータ処理です。たとえば、CやPerlなどを用いて行うデータ処理や、汎用機においてCOBOLなどを用いた集計処理な

    第4回 データ処理の方法 | gihyo.jp
    kuenishi
    kuenishi 2015/05/13
  • Home Page

    Riak KV: flexible data model for many unstructured use cases including user, session and profile data Riak TS: for IoT & other time series data To address global audiences modern web and IoT applications must be built to be highly distributed. But this presents a few challenges. Distributed Systems Challenges: Data Availability Data Accuracy Cost of Scale At Riak, we are distributed systems expert

    kuenishi
    kuenishi 2015/05/13
    This should be re-read across Japanese markettttttt
  • 年俸が700万の准教授 - 武蔵野日記

    今朝は娘の予防接種。肺炎球菌とHibウイルス、そして四種混合である。この予防接種、同時に打てる数が決まっていたり、何日以内には打ってはいけないという制約があったりするので、スケジュールを自動で決めてくれるウェブサービスがあるのだが、裏では制約付き最適化問題(整数線形計画問題)を解いているのかと思うとワクワクする。このワクチンとこのワクチンを同時に打ちたい、などという制約をいろいろ入れても、一瞬で解を返してくれるのだが、これくらいの規模なら特別なことをしなくても解けるのだろうか。 で、予防接種の予約はが入れてくれていたので、行くだけかと思って娘を連れて(雨が降っていたので、抱っこひもで傘をさして)かかりつけの病院に行ったところ、(家にある)問診票を記入しないといけなかったらしい……。「お母さんは家にいるんですよね?持ってきてもらえます?」と言われたが、は土曜日には仕事なので、自分が取りに

    年俸が700万の准教授 - 武蔵野日記
    kuenishi
    kuenishi 2015/05/13
    1ozaより少ないゾこれ…
  • Jepsen: MongoDB stale reads

    Please note: our followup analysis of 3.4.0-rc3 revealed additional faults in MongoDB’s replication algorithms which could lead to the loss of acknowledged documents–even with Majority Write Concern, journaling, and fsynced writes. In May of 2013, we showed that MongoDB 2.4.3 would lose acknowledged writes at all consistency levels. Every write concern less than MAJORITY loses data by design due t

    kuenishi
    kuenishi 2015/05/13
    圧巻のKnossosとNemesis