Redisの25倍のスループットDragonflyを試してみる
インメモリデータストアを現代風に再実装したら? 高速なデータアクセスのためのインメモリデータストアとしては、RedisやMemcachedが有名です。ただし、これらは10年以上前に設計されており、Memcachedに至っては、2003年と約20年前です。 長い年月を経て、機能追加や最適化が進む一方で、どうしても設計の古さも目立ってきます。 その課題を解決すべく開発されたのがDragonfly です。 全ての操作がアトミック 高スループットでもミリ秒未満のスループット を目指し、Redis/Memcached互換なAPIを提供します。 Redisの25倍のスループットを誇り、1インスタンスで百万オーダーのQPSをさばけます。 開発者が実施したAWS EC2上のベンチマークによると、Dragonflyは本家RedisやRedisのマルチスレッドforkであるKeyDBよりも圧倒的なスループット
The Baby Expert
Benefits of Using a Diaper Bag Backpack Every new parent needs the means to carry supplies wherever he or she goes with his/her new baby. It is the primary reason why so many expectant mothers register for a diaper bag of some sort. If you are at that point in your pregnancy with your first child and you are making a baby registry for gifts, consider registering for a diaper bag backpack. Here are
Tarantool Data Integration Platform
How Tarantool works Tarantool keeps all the data in random-access memory (RAM). Solutions of this class are fast, but they often lack data persistence. Tarantool helps overcome these problems. Try Tarantool to see how fast, flexible, and scalable it is. Download When to use in-memory? In-memory solutions are very fast because they work in RAM. This helps you avoid overhead associated with caching
分散型JSONドキュメントデータベース「RethinkDB」が初の運用環境向けリリース | OSDN Magazine
オープンソースの分散型JSONドキュメントデータベース「RethinkDB」開発チームは4月14日、「RethinkDB 2.0」（開発コード「Yojimbo」）公開を発表した。5年の開発期間を経た初の運用環境向けリリースとしている。 RethinkDBはC++で実装されたJSONデータベース。リアルタイムWebアプリケーション向けに作成されており、データが変更された際にリアルタイムでその通知をアプリケーションにプッシュ送信できるのが特徴だという。そのため、複数のユーザーが同時にプレイするようなゲームやコラボレーション型Webサービス、モバイルアプリなどに適しているとしている。 プロジェクトによると、10万人以上の開発者コミュニティがあり、すでにJive SoftwareやMediaflyなど複数の企業がWebやモバイルアプリでRethinkDBを利用しているという。 RethinkDB
Uguisudani
2. uguisudaniとは • https://github.com/moriyoshi/ uguisudani/ • Pure PHP in-memory NoSQL server • 734 lines of code • Crash recovery (journaling) 3. uguisudaniの構造 Request Handler stream_select() Store Proxy Client Client Client Memory Store Journal Handler array() メタデータ fwrite() Metadata 30秒おきに 書き出し 更新操作を 逐次記録 serialize() fwrite() fwrite() Data file file Journal File
jemalloc について調べたのでまとめた - zonomasaの日記
※この記事は３回シリーズのうちの一つ jemalloc について調べたのでまとめた - zonomasaの日記 続 jemalloc について調べたのでまとめた（ビルドと組み込み方法） - zonomasaの日記 jemalloc の解析機能 - zonomasaの日記 photo by mutednarayan jemalloc とは jemalloc は、標準ライブラリで定義されているmalloc, free 等のメモリアロケーション APIの実装である。 jemalloc : 公式ページ jemalloc は2005年より、Jason Evans によって開発されており、SMPでのスケーラビリティのためにFreeBSD のlibcに取り込ま標準アロケータとなっている。 その他にも、Facebook の内部や、KVS のRedis、fluentd などにも取り込まれている。 具体的には
ArangoDB - highly available multi-model NoSQL database
One Core. One Query Language. Multiple Data Models.
LMDB | symas
An ultra-fast, ultra-compact, crash-proof, key-value, embedded data store Symas LMDB is an extraordinarily fast, memory-efficient database we developed for the OpenLDAP Project. With memory-mapped files, LMDB has the read performance of a pure in-memory database while retaining the persistence of standard disk-based databases. Bottom line, with only 32KB of object code, LMDB may seem tiny. But it’
RethinkDB: web developer firstでつくられたNoSQL DB - ワザノバ | wazanova
http://thechangelog.com/114/1 comment | 0 pointsRethinkDBは、オープンソースの分散データベース。同社のFounder & CEOのSlava Akhmechetがchangelogのpodcastでインタビューを受けています。 金融機関に勤めた後、肌に合わなくて、大学院に進学し、スーパーコンピュータの研究へ。そこで、RethinkDBのアイデアを思いつき、そのまま起業して、2009年にYcombinatorの出資を受け、現在に至る。 伝統的なDBであれば、NoSQLであれ、たまたまAPIのようなプログラムインターフェースという建て付け。つまり、webプログラマーにとっては、便利な代物ではない。そこで、デベロッパーツールを一番に、そしてデータベースを二番に考えた、新しいデータベースをつくってみたらどうだろうかというのが、RethinkD
yrmcds 1.0.0 をリリースしました - Cybozu Inside Out | サイボウズエンジニアのブログ
@ymmt2005 こと山本泰宇です。去る 7 月に yrmcds という memcached 互換な KVS を公開したことをご案内しました。それから 5 ヶ月経ちましたが、今回は安定版となるバージョン 1.0.0 をリリースをご案内します。 ダウンロードはこちらからどうぞ: https://github.com/cybozu/yrmcds/releases/tag/v1.0.0 0.9.0 からの変更点を短くまとめるとバグがなくなって、memcached より多分高速になっています。ちょっと長めの記事ですが、末尾にいいことが書いてありますので、是非ご一読ください。 yrmcds の特長 レプリケーション サーバーサイドロック No slabs その他 memcached との差異 運用実績と性能 クライアント 0.9.0 からの変更一覧 バグ報告を募集します！ yrmcds の特長 y
yrmcds 0.9.0 リリース - Cybozu Inside Out | サイボウズエンジニアのブログ
@ymmt2005 こと山本泰宇です。 今回は memcached 互換で冗長構成を簡単に組める自社製 KVS である yrmcds のリリースをご案内します。 ... この Redis 全盛なご時世になんで？とか、repcached や Kyoto Tycoon があるじゃない、といったツッコミの嵐が聞えてきそうです。わかってます、わかってますから物を投げないで！ 順を追って説明しますので、批判はそれからにしてください！ 何が欲しいのか 私は日頃 cybozu.com のインフラで動作するソフトウェアを開発しています。リリース後もうすぐ２年になりますが、お蔭様で 4,000 社以上にご利用いただくまでになりました。商売繁盛で嬉しいのですが、運用側は日々増えるデータとアクセスを捌くべく奮闘しています。 ここのところ問題になっていたのが、MySQL に保存しているセッション情報でした。アプリ
JSONベースのドキュメント指向データベース「RethinkDB 1.6」リリース | OSDN Magazine
JSONベースのドキュメント指向データベース「RethinkDB」開発チームは6月13日、最新版となる「RethinkDB 1.6」（開発コード「Fargo」）を公開した。RethinkDBはC++で書かれたオープンソースの分散型データベースで、JSON形式のドキュメントを保存でき、またRuby、Python、JavaScript（WebブラウザまたはNode.js）からの操作をサポートする。 RethinkDBは分散型構成にも対応するドキュメント指向データベースで、分散環境におけるjoinやサブクエリ、アトミックな更新といった操作をサポートする。拡張性の高さやHadoopスタイルのMap/Reduce、シンプルなクエリ言語、メンテナンスのしやすさなどが特徴で、ライセンスはサーバーがAGPLv3.0、クライアントはApache License 2.0。 RethinkDB 1.6では、クエ
米Oracle、Berkeley DBベースのKey-valueストア型データベース「Oracle NoSQL Database 2.0」をリリース | OSDN Magazine
米Oracleは12月17日、Key-valueストア型データベース「Oracle NoSQL Database 2.0」をリリースした。AGPLv3ライセンスでリリースされているCommunity Editionと有料のEnterprise Editionが用意されており、Community Editionは無料で利用できる。 Oracle NoSQL Databaseは「Oracle Berkeley DB」をベースに分散処理や負荷分散といった機能を加えたKey-valueストア型データベース。Oracleが提供するビックデータ向けソリューション「Oracle Big Data Platform」の構成要素であるが、単体でも利用可能。拡張性、低遅延などを特徴とし、Webアプリケーションやソーシャルメディア、センサーやスマートメーターなどが生成するトランザクショナルデータを容易に管理でき
ReflexWorks（リフレックスワークス）
容易なスケールアウト拡張とトランザクション処理を実現する分散KVS基盤「ReflexWorks（リフレックスワークス）」
米国家安全保障局、高い柔軟性をうたうKey-Valueストア「Accumulo」をApacheプロジェクトに寄贈する提案 | OSDN Magazine
米国家安全保障局（NSA）が「Accumulo」を非営利団体Apache Software Foundation（ASF）に寄贈することを提案した。Accumuloは米Googleの「BigTable」の設計に基づき「Apache Hadoop」を用いて実装された分散型Key-Valueストアで、柔軟性や細かなアクセス管理機能などが特徴という。 NSAが9月4日に公開した提案書によると、AccumuloはNSAが2008年春に開始したプロジェクトで、BigTable設計を利用した分散Key-Valueストアとのこと。大規模データ向け分散処理フレームワーク「Apache Hadoop」、それに「Apache ZooKeeper」と「Apache Thrift」などの技術をベースとする。Apache ZooKeeperは分散アプリケーション向けのコーディネーションサービスで、Apache Th
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - boltdb/bolt: An embedded key/value database for Go.
Facebookが新しいNoSQLであるApolloを発表
GitHub - yahoo/mdbm: MDBM a very fast memory-mapped key/value store.
Dashboard
GitHub - facebook/rocksdb: A library that provides an embeddable, persistent key-value store for fast storage.
