JolokiaでMBeanにアクセスする | Ore no homepage
ちょっとJVMってかMBeanの情報をぶっこぬくツールを作る必要があって、最初jythonで作ったんだけどjythonにはいろいろ失望した。で、同僚にJolokiaってのがあると教えてもらったのですが、これがなかなかイケてる。Jolokiaというのは、簡単に言うと、MBeanにHTTP経由でアクセスできるようにjmxの口を空けてくれるJavaのエージェント。こいつをJavaプログラムやJavaなミドルウェアに仕込んでやるだけでHTTPの口が空いて、そこ経由でいろいろできる。レスポンスはJSONで帰ってくる。 Cassandraの記事はまた次回ｗｗｗ まぁ、今回もJolokiaに手を出したのもCassandra起因なんだけどね。Cassandraはレイテンシやリード/ライト数がMBeanに格納されてて、そいつを抜いてグラフ描画させたいなぁ、と。Cassandraのマネジメントツールとしては、
Java 11 Support in Apache Cassandra 4.0
At the end of July, support for Java 11 was merged into the Apache Cassandra trunk, which will be shipped in the next major release, Cassandra 4.0. Prior to this, Cassandra 3.0 only ran using Java 8, since there were breaking changes in Java that prevented it from run on later versions. Cassandra now supports both Java 8 and 11. To run Cassandra on Java 11, you’ll need to first download an early a
Lambda+: Cassandra and Spark for Scalable Architecture
UPDATE: For some background on Spark Streaming and Cassandra please consult some of my previous blog post on the subject. Many of you have heard of and a few of you may have used the Lambda Architecture. If you’ve not heard of it the name doesn’t communicate a lot. In short the Lambda Architecture has 3 primary components with a 2 pronged approach to analytics: Speed Layer: Records are analyzed as
Cassandraサーバのディスク容量減少アラートが飛んできた！ってときにどう対処するか - oranie's blog
乗るしか無い、このビッグウェーブに。 （このエントリとこのエントリの三番煎じです。） - 追記 Cassandraはデータ領域のDisk使用量が50%でクリティカルと記載しましたが、いきなりズドンと落ちるとかでは無く、compactionを実行した時にテンポラリーファイル作成します。これは対象のSSTableのサイズに依存します。で、このテンポラリーファイルが作成できなくなる可能性がある閾値が50%です。 http://wiki.apache.org/cassandra/CassandraHardware_JP から引用 MemtableSSTableで述べているように、コンパクションは最悪の場合、一時的にひとつのボリューム(つまりデータディレクトリ)に対して最大そのデータと同じだけの空き領域を要求します。 - まずCassandraでDisk空き領域が減少する可能性があるのはほぼ2つ。ア
cassandraを運用していて困っていること - oranie's blog
※2013/03/05に追記 Yuki Morishita(@yukim)さんより以下のエントリについてアンサーを貰いました！！！ https://gist.github.com/yukim/5086476 - なんか呟いたら「m9(^Д^)ﾌﾟｷﾞｬｰ」な意味なのかRTとかがついたので、まとめておこう。きっと「これやれば解決するのに・・・プークスクス！」って教えて貰えるに違いない。半分くらい僕の技術力の低さから来ているのが多いので、Cassandra特有の問題から外れている気がするけど気にしない。 前提条件として HW：CPU12core メモリ64GB Disk:SSDやHDD(RAID10)を使用（詳細な構成は割愛） Cassandra 1.1.5 JDK 1.6.0_33-1 Simple Strategyを使用 1ノード辺り100〜200GB程度のデータを想定 クラスタの数とかは
Cassandraクラスタと、DataStax OpsCenterの構築 | さぶみっと！JAPAN
Cassandraのクラスタ環境を構築して、DataStax OpsCenterでデータの管理ができるようにします。 Cassandraの設定方法のサンプルを載せているblogなどは沢山あるのですが、旧バージョンのCassandraを試している記事が多くて、頻繁にバージョンアップするCassandraに情報が追いついていません。 ここでは、新しくCassandraを試してみたい方に参考になればと考えて記事を書きました。 また、DataStax OpsCenterというツールを利用して、データの可視化にも挑戦しています。 Cassandraとは 公式ページ：http://cassandra.apache.org 正式名称はApache Cassandraです。 Wikiより引用 『Cassandraは、非常に高いスケーラビリティーを持ち、イベンチュアルコンシステントな分散システム構造のKVS
Cassandra vs. Redis
This document compares Cassandra and Redis for use as a backend for a Facebook game with 1 million daily users and 10 million total users. Redis was chosen over Cassandra due to its simpler architecture, higher write throughput, and ability to meet the capacity and performance requirements using a single node. The Redis master handled all reads and writes, with a slave for failover. User data was
Eclipse上でCassandraを実行する
EclipseでCassandraを実行するためのメモ。 要Ant, Maven EclipseにCassandraをロード 1. ソースを展開 2. ant build 3. ant generate-eclipse-files 4. File->Import->Existing Project into Workspace... Run->Run Configuration...を実行し、Main classに org.apache.cassandra.thrift.CassandraDaemon を指定する。 VM argumentsを以下のように指定。 VM arguments: -ea アサーションを有効にする -Xmx96M 最大ヒープを96Mにする -Dcom.sun.management.jmxremote.port=7199 JMX portを7199にする -Dcom.
Cassandra運用に活躍したスクリプトたち : toda_k
弊社検証環境で半年ほど10数台規模のCassandraクラスタを運用してきたのですが、運用に使っているスクリプトがある程度固まってきたのでまとめてみます。更なる簡素化・便利化を進めるための棚卸しという感じです。古いものも混ざっていて若干申し訳なくはあるのですが……どなたかの役に立てば幸いです。では見て行きましょう。 スクリプトの運用体制について すべてのスクリプトはSubversionで管理され、主にJenkinsによって自動的に実行されます。多数のノードに対する同時処理を行なうためにGNU Parallelを使うことがあります。 またCassandraサーバはAWS EC2上で運用されているため、AWS SDK for RubyによってIPアドレスの取得などを行なっています。 各ノードでのnodetool ring実行結果を集約 クラスタが不安定なとき、実際は動いているのに一部のノードか
Leveled Compaction in Apache Cassandra | Datastax
Introduction to Compaction Cassandra's log-structured storage engine enables Cassandra's amazing performance and features like application-transparent compression by turning all updates into data files called sstables that are written sequentially to disk. No update-in-place is done (because that would require doing random i/o); instead, a new version of the columns being inserted or updated is wr
What's New In Cassandra 1.0 | DataStax
What’s New in Cassandra 1.0: Improved Memory and Disk Space Management Cassandra 1.0 incorporates several improvements to how Cassandra's storage engine manages memory and disk space, bringing better performance and addressing some of the most common pain points for Cassandra administration. Off-heap row cache Cassandra provides a built-in row cache for super-fast access to frequently requested da
Cassandra Conference in Tokyo |
ビッグデータの処理に向いていることやその高いスケーラビリティでじわじわと浸透を見せるNoSQLソリューションですが、まだまだ各企業内部での評価試用の段階に留まっているケースが大半で、業務システム構築の基盤として採用・提案して頂くにはまだまだ認知度が足りず、参考となる情報も少ないのが実情だと思われます。 そこで、本セミナーではFacebook社に端を発し、現在ではApacheトップレベルプロジェクトとして開発されている分散KVS “Cassandra” を使用したシステム導入・構築の『実例』のご紹介に加え、その導入メリットの検証結果、企業向け有償サポート/トレーニングの開始等にも触れながら、最新のクラウド時代のシステム構築のリアルな姿をご紹介致します。 また、Cassandraの開発コアメンバーから成るDataStax社のCTO Jonathan Ellis氏の来日が決定！同時通訳付きで
Cassandraのトランザクションサポート化 & web2pyによるcms用プラグイン開発
"PyCon JP 2011"のライトニングトークでの資料です。 Cassandraベースでどのようにトランザクションを実現したか（の概略）と、 webフレームワークであるweb2py用のCMSプラグインのご紹介です。 最近はCassandraをマイクロサービス/サービスメッシュ基盤へ応用しています。 https://b-rabbit.jp/Read less
MongoDB vs Cassandra - Server Density Blog
By David Mytton, CEO & Founder of Server Density. Published on the 21st July, 2011. Over the 2 years we’ve been using MongoDB in production with our server monitoring tool, Server Density, we’ve built up significant experience and knowledge about how it works. Back in 2009 when I was looking at a replacement for MySQL I looked at Cassandra but dismissed it because MongoDB had several advantages, a
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
DataStax for Developers | DataStax
What’s new in Cassandra 1.0: Compression | Datastax
What’s new in Cassandra 1.0: Performance | Datastax
CassandraSF2011で発表されたCassandraのインデクシングガイドライン
https://skydrive.live.com/fullscreen?cid=d105615a0f594518&sc=documents&resid=D105615A0F594518!144&filename=Cassandra_Counter.pptm&wx=p&wv=s&wc=officeapps.live.com&wy=y
GitHub - edanuff/CassandraCompositeType: CompositeType for composite column names in Cassandra