タグ

KVSに関するnobusueのブックマーク (16)

  • DZone

  • En Yüksek Kur Paykasa Bozdurma

  • レッドハットが分散KVS「JBoss Data Grid 6.0」を国内で提供開始

    レッドハットは2012年7月24日、分散キー・バリュー型データストア(KVS)「JBoss Data Grid 6.0」の国内での提供を開始した。同社のミドルウエア「JBoss Enterprise Application Platform」のバージョンに合わせ6.0となっているが、米国で2012年6月に発表された新製品である(関連記事 : Red Hat、JBossのKVSやビジネスルール管理システム新版を披露)。 JBoss Data Gridは複数のサーバーをクラスタ化し、メモリー上にデータを複製しながら保持するソフトウエア。サーバーを負荷に応じて追加したり減らしたりすることで処理能力を増減できる。「ユーザーセッション情報のデータ処理やグローバルレベルでの出荷のトラッキング情報のデータ処理、大規模なネットビジネスにおけるコンテンツ配信環境の構築」(レッドハット)などでの利用を想定して

    レッドハットが分散KVS「JBoss Data Grid 6.0」を国内で提供開始
    nobusue
    nobusue 2012/07/24
  • アマゾンが独自開発のDBサービス「Amazon DynamoDB」を開始

    米アマゾン・ウェブ・サービス(AWS)は2012年1月18日(米国時間)、拡張が容易なデータベース(DB)のクラウドサービスである「Amazon DynamoDB」を開始した。同社が独自に開発した分散キー・バリュー型データストア(KVS)である「Dynamo」をベースにしたサービスである。データの保存先にSSD(ソリッド・ステート・ドライブ)を使用しており、高速であるとともにDBの拡張性が高いことを特徴とする。 AWSが2007年に論文発表したDynamoは、「Amazon.com」のショッピングカートのバックエンドなどに使われており、リレーショナルデータベース(RDB)ではない「NoSQLDBの代表格として知られている。Dynamoは、「キー」と「バリュー(値)」の形式で保存したデータを、複数のサーバーに自動的に分散配置することで、サーバーの台数に比例して処理性能が向上するスケールアウ

    アマゾンが独自開発のDBサービス「Amazon DynamoDB」を開始
  • 1台だけ読み書きすると2.2倍に

    読み込みの場合、ONEではコピーを持つ全ノードに一斉に読み出し要求を出し、最初に返ってきたデータをアプリケーションに渡す。QUORUMは過半数のノードから返答が来た時点で、最も新しいタイムスタンプを持つデータを渡す。ALLは全ノードの返答から最新データを選ぶ。 制御方式の組み合わせで性能高まる 検証の結果、最も性能が高かったのがONEで、最低のALLと比較した結果が2.2倍だった。データの一貫性の高さよりも、性能向上を優先する場合は、ONEを選ぶのが有効だ。 ただし実際に性能向上を重視し、読み出しと書き込みの両方でONEを選ぶと、アプリケーションは想定した動作をしない恐れがある。検証用アプリケーションで、ショッピングサイトの商品閲覧履歴をONEで書き込むと、まず1台のサーバーにデータが書き込まれ、コピーが残りの2台に書き込まれるのはその後になる。ONEを使った読み出し要求が書き込みの直後に

    1台だけ読み書きすると2.2倍に
  • リニアには性能が上がらない

    Cassandraのスループットの変化を調べた結果を図2に示した。Cassandraのノード(サーバー)数が2、4、6台のそれぞれにおいて、実行する検証用アプリケーションのスレッド数を徐々に増やした。各スレッドで、書き込み、または読み出しを繰り返し実行し、スレッド数を増やしていくことで、Cassandraの負荷を高めていった。 Cassandraに対する負荷を高めていくと、スループットは曲線を描いて向上していくことが分かった。負荷の増加に対して、十分に性能が向上しなくなったポイントを探し、2、4、6ノードの場合を比較した。検証用の機器は、プリファードインフラストラクチャーから貸与を受けた まず分かったのは、アクセス負荷を高めたとき、Cassandraのスループットは曲線を描いて、向上していくことだ。RDBなど多くのデータベースは負荷を高めていくと、スループットはほぼリニアに伸び、あるしきい

    リニアには性能が上がらない
  • HadoopSupport - Cassandra Wiki

    Contents Overview MapReduce Pig Hive Oozie Cluster Configuration Troubleshooting Support Overview Hadoop integration was added way back in version 0.6 of Cassandra. It began with MapReduce support. Since then the support has matured significantly and now includes native support for Apache Pig and Apache Hive. Cassandra's Hadoop support implements the same interface as HDFS to achieve input data lo

    nobusue
    nobusue 2011/03/08
    0.6以降でHadoop対応が入った
  • FrontPage_JP - Cassandra Wiki

    Cassandra Wiki Cassandraは、非常に高いスケーラビリティーを持ち、イベンチュアルコンシステントな分散システム構造のKVS(Key Value Store)です。 Cassandraは、主にBerkeley DBMySQLから構成されるAmazon Dynamo (PDF)の分散ハッシュテーブル(DHT)と、Google BigTable (PDF)のデータモデルという分散システムのテクノロジーを併せ持っています。 Amazon Dynamoのように、Cassandraはイベンチュアルコンシステントであり、Google BigTableのようにCassandraは典型的なKVS(Key Value Store)より豊かなカラムファミリーベースのデータモデルを提供します。 Cassandraは、2008年7月にFacebookによってオープンソースとして公開されました。

  • Apache Cassandra | Apache Cassandra Documentation

    Latest Version Apache Cassandra 5.0 Latest release on 2024-07-18 Maintained until 5.3.0 release

    nobusue
    nobusue 2010/10/11
    Webサイトのデザインが新しくなってます
  • [次世代DB編]分散KVSで正規化をしてはいけない

    クラウド上のデータベースとして、分散型のキーバリューストア(分散KVS)を用いることが多くなった。分散KVSは、スケーラビリティーに優れており、特にユーザー数が多いシステムでは利用価値が高い。 ただし、分散KVSにはいくつかの制約があり、システム開発に利用する際には、これまでの“RDBMS脳”をいったんリセットする必要がある。中でも、RDBMSでは真っ先に考慮していた「正規化」については、分散KVSでは原則として行ってはいけない。 分散KVSの四つの特徴 なぜ分散KVSでは正規化をしてはいけないのか。これを理解するには分散KVSの特徴を押さえる必要がある。分散KVSには、大きく四つの特徴がある(図1)。 一つは、分散KVSでは問い合わせにキーを使って、バリュー(値)を取得することだ。データ構造が単純なので、データの取り出し時間が短くて済む。PerlPHPの連想配列や、JavaMap、C

    [次世代DB編]分散KVSで正規化をしてはいけない
  • Legacy Communities - IBM Community

    If you’re looking for a developerWorks forum — Don't panic! You are in the right place. You are here because specific IBM developerWorks forums, blogs and other Connections content have been decommissioned. This page will help you find the content you are looking for, get answers to your questions, and find a new community to call home. Where am I? You are on the IBM Community area, a collection o

  • Evolving the Key/Value Programming Model to a Higher Level

    InfoQ Software Architects' Newsletter A monthly overview of things you need to know as an architect or aspiring architect. View an example

    nobusue
    nobusue 2010/01/27
  • dfltweb1.onamae.com – このドメインはお名前.comで取得されています。

    このドメインは お名前.com から取得されました。 お名前.com は GMOインターネットグループ(株) が運営する国内シェアNo.1のドメイン登録サービスです。 ※表示価格は、全て税込です。 ※サービス品質維持のため、一時的に対象となる料金へ一定割合の「サービス維持調整費」を加算させていただきます。 ※1 「国内シェア」は、ICANN(インターネットのドメイン名などの資源を管理する非営利団体)の公表数値をもとに集計。gTLDが集計の対象。 日のドメイン登録業者(レジストラ)(「ICANNがレジストラとして認定した企業」一覧(InterNIC提供)内に「Japan」の記載があるもの)を対象。 レジストラ「GMO Internet Group, Inc. d/b/a Onamae.com」のシェア値を集計。 2023年5月時点の調査。

  • 分散KVS「kumofs」、元ミクシィCTO設立のえとらぼがOSSとして公開

    えとらぼは2010年1月18日、分散キー・バリュー型データストア(KVS)の「kumofs(クモエフエス)」をオープンソース・ソフトウエア(OSS)として公開した。えとらぼは、SNS(ソーシャル・ネットワーキング・サービス)mixiを開発した元ミクシィCTO(最高技術責任者)の衛藤バタラ氏(関連記事)が設立したベンチャー企業である。 分散KVSは、大量のデータを多数のサーバーに分散して保持するための基盤ソフトウエア。kumofsは、えとらぼが運営する写真ストレージサービス「Ficia」で使用している。また、InteropTokyo 2009 クラウドコンピューティングコンペティション(クラウドコン)で優勝したソフトウエアでもある(関連記事)。データの複製を複数サーバーで保持することで、一部のサーバーに障害が発生してもサービスを継続できる。またサービスを止めることなくサーバーの追加や交換もで

    分散KVS「kumofs」、元ミクシィCTO設立のえとらぼがOSSとして公開
  • key-valueストアの基礎知識

    首藤 一幸 Last-updated: January 5, 2010 注: このページの文章は Software Design 誌 2010年 2月号に掲載された以下の記事の元原稿です。 Software Design 誌編集部の了承の元に、ウェブページに掲載しております。 首藤一幸: "key-valueストアの基礎知識", Software Design 2010年 2月号, p.14-21, (株)技術評論社, 2010年 1月 18日 クラウド、特にPaaS向けのソフトウェア開発が現実のものとなり、 そこではリレーショナルデータベースとは違ったデータベースが 勢いを増しています。 その代表であるkey-valueストアを解説します。 もくじ key-valueストアとは なぜkey-valueストアか key-valueストアの使いどころ key-valueストアとNoSQL

  • 分散Key-Valueストア「kumofs」を公開しました! - Blog by Sadayuki Furuhashi

    分散Key-Valueストア kumofs を、日オープンソースソフトウェアとしてリリースしました! kumofs@SourceForge kumofs関連資料まとめ kumofsとは? kumofs(クモエフエス)は、実用性を重視した分散データストアです。レプリケーション機能を備え、一部のサーバーに障害が発生しても動作し続けます。単体でも高い性能を持ちながら、サーバーを追加することで読み・書き両方の性能が向上する特徴を持ち、低コストで極めて高速なストレージシステムを構築・運用できます。 kumofsの大きな特徴は、システムの構成の簡単に変更できる点です。システムを止めることなく、簡単な手順でサーバーを追加したり復旧したりできます。アプリケーションには一切影響を与えません。 またkumofsは、広く利用されている分散キャッシュシステムの「memcached」と互換性のあるプロトコルを実装

    分散Key-Valueストア「kumofs」を公開しました! - Blog by Sadayuki Furuhashi
  • 1