実用段階に入ったNoSQLをおさらい 「Cassandra」の概要と導入手順・基本設定
ビックデータとは はじめに、Cassandraが得意としているビックデータについて解説します。ビックデータという言葉が一般的に使われていますが、実際のところ何を指すのか、これまでとの違いは何かを説明します。 何に使われているのか 「ビックデータ」とは、通常の処理では処理不可能な膨大な蓄積データを指す言葉です。これまでは、処理することをあきらめていた膨大なデータを処理対象とすることで、新しい答えを見出すことを目指しています。しかも短時間で処理することで、タイムリーな活用を目指すのです。 これまでは、ばらばらに発生していたデータが、通信環境の発達でリアルタイムに収集することが可能になりました。個々のデータは小さくても、大量に集まれば膨大なデータです。せっかく集めた膨大データを活用するために時間が掛っては何もなりません。大量に集めたデータを短時間に効率よく処理して、処理結果を得られる必要がありま
NoSQLのCassandraが1.0に。読み込み性能は400％向上
The Apache Software Foundationは、「Apache Cassandra 1.0」のリリースを発表しました。CassandraはNoSQLデータベースの代表的なソフトウェアです。もともとはFacebookで2008年に大規模データ処理のために開発され、その後オープンソースとなって2009年からApache Software Foundationのプロジェクトとして開発されていました。 The Apache Software Foundation Announces Apache Cassandra™ v1.0 : The Apache Software Foundation Blog 分散処理に対応したスケーラブルなデータベースで、単一障害点（Single Point of Failer：SPOF）がなく、ノードを追加していくことで自動的に性能が向上していくという
Apache Cassandraチーム、多数の変更を含むメジャーアップデート版「Apache Cassandra 1.0」をリリース | OSDN Magazine
The Apache Software Foundatino（ASF）の分散データベースApache Cassandra開発チームは10月18日（米国時間）、初の正式版「Apache Cassandra 1.0」を公開した。パフォーマンスの向上やメモリ使用量の削減など、多数の変更点が加えられている。 Apache Cassandraは列指向の分散データベース管理システムで、大規模なワークロードをリアルタイムで取り扱うことができる。拡張性や信頼性に優れ、毎秒5000のリクエストに対応できるという。もともとは米Facebookで開発された技術で、2009年にASFに寄贈、2010年にASFのトップレベルプロジェクト（TLP）となった。Facebookのほか、米Twitter、米Cisco Systems、米Diggなど多数の導入実績を持つ。 1.0では、キーを管理するSSTable（Sorte
クエリ言語「CQL」が加わった分散データベースシステム「Apache Cassandra 0.8」リリース | OSDN Magazine
The Apache Software Foundatino（ASF）のApache Cassandra開発チームは6月2日、最新版「Apache Cassandra 0.8」を公開した。SQLのようなクエリ言語が追加され、「NoSQLではなくなった」という。 Cassandraは米Facebookで生まれた列指向の分散データベース管理システム。スケーラビリティに優れ、大規模データを効率良く処理できるように設計されている。FacebookはプロジェクトをApacheに寄贈、現在、トップレベルプロジェクト（TLP）として開発が進んでいる。Facebookのほか、Twitter、Redditなどでも利用されている。 Cassandra 0.8の最大の特徴は、クエリ言語「CQL」（Cassandra Query Language）の導入。USE、SELECTなどSQLに類似したシンタックスを持ち
Apache CassandraとApache Hadoopを一体化した「Brisk」発表 | OSDN Magazine
「Apache Cassandra」の商用サービスを提供する米DataStaxは3月22日（米国時間）、Cassandraと「Apache Hadoop」を組み合わせたディストリビューション「Brisk」を発表した。1カ月半後のリリースに向け、ユーザー登録を開始している。 Apache CassandraとApache Hadoopはともに非営利団体Apache Software Foundation（ASF）のオープンソースプロジェクト。Apache Cassandraは元々は米Facebookで開発された技術。オープンソースの分散データベース管理システムで、大規模データ用の拡張性などを特徴とする。一方、Apache Hadoopは米Yahoo!がASFに寄贈した技術で、大規模データ用の分散コンピューティング用ソフトウェアとなる。 DataStaxが発表したBriskは、HadoopとH
Runtime error - Meta Search
Error message : Directory is not found or not writable (DATA_DIR) Directory is not found or not writable (DIFF_DIR) Directory is not found or not writable (BACKUP_DIR) Directory is not found or not writable (CACHE_DIR) Site admin: whitestar Copyright © 2006-2023 whitestar. All Rights Reserved. Icons powered by famfamfam. PukiWiki 1.5.0 Copyright © 2001-2006 PukiWiki Developers Team. License is GPL
Cassandra入門と、さらに詳しく知るためのリソース集
クラウド時代の新しいデータベースとして、非リレーショナルな構造を持つNoSQLデータベースが話題になっています（NoSQL＝Not Only SQL。命名の経緯はこちら）。そのNoSQLの中で、もっとも注目されているデータベースの1つがApacheのCassandraです。 Cassandraは、Facebookで大規模データ処理のために開発され、その後オープンソースとなり、現在ではApache Software Foundationのプロジェクトとして開発されています。 現在、CassandraはFacebookやDiggなどで使われている、もしくは使うことが検討されているとされ、Twitterでも（ツイートデータの格納には使われないようですが、それ以外の用途で）利用されています。 TwitterとDiggがNoSQLの「Cassandra」を選ぶ理由 Twitterが、Cassandr
クラウドの力を引き出す分散データベース
クラスタおよびノードの運用・監視について Cassandraクラスタを構成して利用する際に必要となる、オペレーションのコマンドを紹介します。 利用環境例 コマンドの実行例を紹介するため、バージョン0.6.1を使用して、以下のような4ノード構成のCassandraクラスタを構築しています。 クラスタおよびノードの管理コマンド Cassandraにおける、クラスタやノードの操作、状態の確認などには、nodetoolコマンドとcrustertoolコマンドを使用します。 コマンドの書式は、 nodetool もしくは crustertool -h -p サブコマンド となります。 クラスタの確認 接続されているノードの一覧と現在の状態を確認する場合は、nodetool ringコマンドを使用します。 <code> <span style="font-size: 12px;"> # bin/nod
API - Cassandra Wiki
CQL Cassandra offers a SQL-inspired interface called CQL. The primary difference from SQL is the emphasis on denormalization (via Collections) over Joins. There is a quick introduction in GettingStarted and full documentation here. To use CQL effectively you should also understand the [DataModel]. If you plan to write a CQL client, you should also read about the communication protocol specificatio
Cassandraの状態をJconsoleを使用して監視する
Cassandraを起動すると8080ポートで何かのサービスが起動します。 何のサービスかずっと気になっていたのですが、CassandraのWikiに ちゃんと書いてありました。 MemtableThresholds Java Management Extension (JMX)用のポートです。 ※JMXに関しては、以下のURLで詳しく解説されています。 アプリケーション管理に威力を発揮 JMX 基礎編 JconsoleからCassandraのJMXに接続してみます。 Jconsoleの起動 おそらくですが、JDK1.5以降をインストールしていれば、 Javaのインストールフォルダのbin、 例えばC:\Program Files\Java\jdk1.6.0_16\binに jconsole.exeという実行ファイルがあると思います。 これを起動すると、こんな画面が表示されます。 Cass
FAQ_JP - Cassandra Wiki
FAQ CassandraはListenAddress設定で何故0.0.0.0(全アドレス)でリッスンできないのですか? Cassandraはどのポートを使うのですか? Cassandraは何故大量のインサート後に遅くなるのでしょうか? 新たにノードを追加したときに，既存のデータはどうなってしまうのでしょうか? 動いているクラスタに新たにカラムファミリを追加したり削除したり改名したりできますか? Thriftクライアントやハイレベルクライアントがどのノードに接続しているかは問題になるでしょうか? Cassandraを動かすマシンの推奨スペックってどんなものでしょうか? SSTablesとMemtablesって何ですか? Javaで何故TimeUUIDTypeを使うのが難しいのでしょうか? Cassandraからデータを削除したのにディスク使用量は同じです.何が起こってるのでしょうか? 何故
さくらVPSでApache Cassandra 0.7のSecondary indexesを利用してみる - happytanの足跡
Cassandra 0.7で実装されたSecondary indexesを試してみた。「cassandra-cli」上で動作するかまずは試してみる。 参考にしたのは、「DataStax：What's new in Cassandra 0.7: Secondary indexes」と「λab's Blog：Cassandra0.7.0のSecondary indexesを使用したJava APIサンプル」を参考にしました。 テスト用のkeyspaceを作成する まずは、テスト用の「keyspace」と「column family」を作成する。 create keyspace test2; use test2; create column family users with comparator=UTF8Type and column_metadata=[{column_name:full_n
Cassandraにhectorを使用してJavaで接続し、検索を実行する
これまでCassandraとの接続はPythonで行ってきましたが、 通信部分にはThriftを使用しているので、言語は問わないはず。 また、Python + LazyBoyの組み合わせだと、結構な確立で 接続エラーになってしまい、待ちのロジックを入れないといけなかったので、 JavaからCassandraに接続して、検索を実行してみようと思います。 以前、JavaでThriftを使う方法を調べたことがあります。 また、Python + ThriftでCassandraに接続する方法も調べてますので・・・ Debian + Thrift + PythonのサーバーにWindows + Javaから接続する 列指向データベースCassandraにPythonで接続する 列指向データベースCassandraにPython + Thriftで住所データを登録する この辺の知識を統合すれば接続でき
FrontPage - Cassandra Wiki
Most of the information in this Wiki is being deprecated! The official Cassandra documentation is located here. Cassandra is moving away from this wiki for user-facing documentation in favor of in-tree docs. Patches to the official in-tree documentation are welcome and can be submitted via a GitHub Pull Request. This wiki is intended instead to document Cassandra internals and how to edit them and
Cassandraで登録しているカラムデータの検索方法(Cassandra:inverted indexの翻訳)
以前、Cassandraに郵便番号を登録してみました。 列指向データベースCassandraにPython + Thriftで住所データを登録する 登録したからには、郵便番号や住所を指定してデータの検索を 行いたかったのですが、やり方がわからず。。。 いろいろ調べていたら、こんな記事を見つけました。 Cassandra : inverted index http://www.royans.net/arch/cassandra-inverted-index/ ざっくり翻訳してみると、こんな感じの内容だと思います。 私の知る限り、Cassandraは ・スケーラブル(scalable) ・分散(distributed) ・自己複製(self replicating) ・結果整合性(eventually consistent) ・javaで動作する ・単一障害点を持たない ・スキーマレスのkey
Home - CASSANDRA - Apache Software Foundation
This is the home of the Apache Cassandra distributed database project. Apache Cassandra is an open source NoSQL distributed database trusted by thousands of companies for scalability and high availability without compromising performance. Linear scalability and proven fault-tolerance on commodity hardware or cloud infrastructure make it the perfect platform for mission-critical data. Site Navigati
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Cassandra Thrift APIのConsistencyLevel « Rest Term
Cassandra Clusterの構築 - LunaBiblos
MultinodeCluster_JP - Cassandra Wiki
Cassandraの構造 - LunaBiblos