タグ

kvsに関するGlnのブックマーク (9)

  • ケーススタディ — redis 2.0.3 documentation

    Note 英語家のページは、 PHPを使って説明 説明していますが、このページではPythonと Tornado を使ったチュートリアルに変えてあります。 Bitbucketの リポジトリ に、このチュートリアルのファイル一式が含まれています。 tutorial/retwis/ フォルダを自分の作業フォルダにおいて、 retwis_start.py に、これから説明する内容を追加で実装していってください。なお、実力に自信のある方は、PHPRubyの参考実装だけを見ながら、 RegisterHandler や、 FollowHandler クラスもPythonに移植してみてください。 また、 @yssk22 氏がnode.js版を実装してくれました。これもリポジトリの中に入っていますので、興味のある方はこちらのファイルの内容に読み替えてください。 RedisとPythonを使ったシンプ

  • redisで遊んでみた with python - 作業記録/備忘録(仮)

    概要 redisで遊んでた(?)先輩がいたので、自分はmemcachedしか使ったこと無かったこともあり、とりあえず触ってみようと思い遊んでみることにした。 ひとまずは、redisの特徴、インストール手順、コンソールからのset/get、pythonからのset/getの手順について以下に記載する。 redisとは redisとはopensourceなkey-value store(kvs)/インメモリDBである。 基的にはmemcachedなども同じようなkvsであるが、以下の点で"advanced"である。 ハッシュ以外のデータ構造もサポートしている。リスト型、集合型、順序付き集合型などのデータ構造が扱え、サーバ側でコレクションに対するpush/pop、コレクション同士のunion/intersection、数値のincr、decrなどの操作がアトミックに行える。 マスター・スレーブ

    redisで遊んでみた with python - 作業記録/備忘録(仮)
  • 永続化対応のインメモリDB「Redis」が登場 - @IT

    2009/02/26 memcachedに似たキーと値の対を保存するタイプの新しいデータベース「Redis」がGoogle Codeで2月25日にベータ版として公開された。開発したのは、イタリア人でフリーランスの開発者、Salvatore Sanfilippo氏。同氏はイタリアでソーシャルブックマークサイトやソーシャルニュースサイトを立ち上げた経験があり、現在はWebサイトの訪問者をリアルタイムで追加表示するステータス情報取得サービスを開発中という。 Redisのソースコードは、GPL2のライセンスで公開されている。ANSI Cで書かれていて、LinuxMac OS Xを含む多くのPOSIXシステムで動く。現在、PHPRubyのクライアントライブラリを開発中という。 Redisはmemcachedのようにキーと値の対を、すべてメモリ上に保存する。ただし、memcachedと異なり、同時

  • 世界の「NoSQL」開発者が東京に集結 - NOSQL afternoon in Japan - Blog by Sadayuki Furuhashi

    NoSQLと呼ばれる新型の分散データストアの開発者が一堂に会するイベント NOSQL afternoon in Japan が、2010年11月1日、楽天タワーで開かれました。 海外からは「Cassandra」のサポートを行う Riptano や、「MongoDB」を開発する 10gen、「Couch DB」の Cloudant、「Hadoop」の Cloudera のエンジニアが登壇し、日からは Hibari、Okuyama、ROMA、そして kumofs の開発者が講演しました: ContentsPresenters HibariJoe NortonGemini Mobile Technologies OkuyamaTakahiro Iwase CassandraNate McCallRiptano ROMAMuga NishizawaRakuten Mongo DBRoger Bo

  • ジェミナイ、分散KVS「Cassandra」を使ったリアルタイムログ解析システムをOSS化

    ジェミナイ・モバイル・テクノロジーズは2011年3月3日、リアルタイムログ解析システム「Flume-Cassandra Log Processor」をオープンソースソフトウエア(OSS)として公開した(配布サイト)。大量のシステムログを瞬時に分析して、グラフィカルなレポートを作成できる。ログ保存には、OSSの分散キー・バリュー型データストア(KVS)「Cassandra」を使用する。 Flume-Cassandra Log Processorでは、監視対象のサーバーで発生したイベントのログを、1秒以内にストレージであるCassandraに保存する。Cassandraは書き込みが高速な分散KVSで、サーバーの台数に比例して、ストレージ容量とI/Oを拡張できる。そのため、クラスターのサーバー台数を増やすことで、数百Tバイトのログの格納が可能になるとしている。ログの分析機能やレポート作成機能のほ

    ジェミナイ、分散KVS「Cassandra」を使ったリアルタイムログ解析システムをOSS化
  • 「ソーシャルアプリでNoSQL(あるいはKVS) 〜実践NoSQL〜」に出席してきました - Dive in Blue

    KVSについて興味を持って調べているのですが、他社でどのようなKVSが、どう利用されているのか、どう評価されているのかが聞きたかったので、グリーCTOの藤さんが講師を務めたセミナー、「ソーシャルアプリでNoSQL(あるいはKVS) 〜実践NoSQL〜」に出席してきました。 データ集計をどうやってやるかとか、Consistencyな更新(cas操作を使う)とか、シリアライズ形式のこととか、気になっていた部分のお話をたくさん聞けたので、とてもためになるセミナーでした。 忘れないうちに気になったところを簡単にメモしておきます。 (*スライドの流れ通りではないです) 1:1型(key : value)KVS いわゆるKVS。単純な実装なので安定感がある。利用実績も豊富 kumofs, Flare, voldemote, Tokyo Tyrant, etc..たくさんのソリューションがある グリー

    「ソーシャルアプリでNoSQL(あるいはKVS) 〜実践NoSQL〜」に出席してきました - Dive in Blue
  • NoSQLにXML、意外に面白いRDBMS“以外” (2/2)- @IT

    データベースの新世代を築くか、NoSQL 新しいデータベース群にも触れておかなくてはなりません。近年、これまでの概念を超えるデータベースが次々と生まれ、台頭してきています。それぞれ特徴が分かれており、定義することは難しいのですが、キーワードに「NoSQL」や「KVS」があります。 データ量やアクセス数の多い大規模Webサイトを想定し、Web全体を1つの大きなシステムとしてとらえるような発想の基で、新しくデータベースシステムを作ろうとしているような印象を受けます。 イメージとしては「これまでのテーブル構造やSQLにとらわれずKVS(Key-Value Store)で行こう」という、“発想の転換”があるようです。主導しているメンバーにアカデミック系など20代が並んでいるのも特徴的です(逆にいうと、従来のデータベースにはベテランエンジニアが多い印象があります)。データベース業界の世代交代ともいえ

  • NoSQLはRDBMSに取って代わるものなのか?

    NoSQLRDBMSに取って代わるものなのか?:RDB開発者におくるNoSQLの常識(1)(3/3 ページ) NoSQLもいろいろ NoSQLデータベースはその出自から「目的特化型のデータストア」という性格が強く、製品ごとに得意分野が異なります。つまり、すべてのNoSQLデータベースを同列に扱うことはできません。ただし「RDBMSと比較して」という視点から見れば、NoSQLデータベースは以下のような特長を持っているといえます。 最大の特長としては、RDBMSと比べて単純な読み書きの性能が高いという点が挙げられます。しかし、先に説明したように、NoSQLRDBMSでは当たり前のことを一部あきらめて性能を向上させています。性能向上の引き替えに、次のような欠点を抱えています。 まず、一般にデータ構造がシンプルであるということ。リレーションもなく、読み取り時の結合はできません。また、データ検索

    NoSQLはRDBMSに取って代わるものなのか?
  • NoSQLはRDBMSに取って代わるものなのか?

    注目を集めるNoSQLデータベース 数年ほど前から、分散KVS(Key-Value Store)や列指向(Column-Oriented)データベース、ドキュメント指向(Document-Oriented)データベースなどの新しいデータベース技術が注目を集めています。これらの新しいデータベース技術は、リレーショナルデータベース管理システム(RDBMS)とは異なる考えに基づいているので、よく「NoSQL」データベース(注1)と総称されています。 注1:「NoSQL」という言葉はもともと「近年登場している、RDBMS以外の(つまりSQLを使わない)データベース」を総称、表現したものであり、その後から「SQLは不要だ」というイメージを持つキーワードのようになってきました。データベース開発者の中には、このようなRDBMSに対するネガティブなイメージを好まず、NoSQLを「Not Only SQL

    NoSQLはRDBMSに取って代わるものなのか?
  • 1