InfoQ: グラフデータベース、NOSQL、Neo4j
VoldemortやTokyo Cabinetといったキー/バリューシステムにおけるモデリングの最小単位はキー/バリューペアになる。そして、BigTableやそのクローンでは可変数の属性をもつタプルに、CouchDBやMongoDBといったドキュメントデータベースではドキュメントになる。これに対しグラフデータベースでは、データセット全体をひとつの巨大な高密度ネットワーク構造としてモデル化する。 ここではNOSQLデータベースにおける2つの興味深いポイント、スケーラビリティと複雑さについて詳しく説明する。 1. スケーラビリティ CAP: ACID 対 BASE 従来のデータベースシステムのほとんどは、トランザクションに基づいてデータの完全性を保証する。トランザクションを使うことで、データ管理のあらゆる状況において、データの一貫性を確保している。こうしたトランザクションの性質は、ACID（A
C-Store: A Column Oriented DBMS
The CStore project is a collaboration between MIT, Yale, Brandeis University. Brown University, and UMass Boston . Download C-Store version 0.2 is now publicly available. Here is a snapshot of the C-Store code base version 0.2, released in October 2006. It is built with open source tools and runs on Linux x86 computers. New Warning: This code compiles on old versions BerkeleyDB and gcc. Consequent
DbUtilsめも
DbUtilsメモ DbUtilsはApache JakartaプロジェクトのサブプロジェクトであるJakarta Commonsで開発が進められているコンポーネントで、JDBCをベースにしたDBアクセス用ユーティリティの集合体、といった感じものです。これまでDbUtilsはSandboxの方に入っていましたが、2003/11末(2003/11/25?)2003/11/11に1.0がリリースされました。 2003/12/13訂正 The Jakarta Site - News and Status(http://jakarta.apache.org/site/news.html)で確認したら2003/11/10に1.0のリリースがアナウンスされていました。 ★DbUtilsのホームページ Commons DbUtils - JDBC Utility Component(http://jak
JDBC Peformance Tips
JDBC に関する性能のTips 集として、様々なドキュメントを引用、抜粋しました。 主なドキュメントは、http://www.javaperformancetuning.com/ です。(Newsletter no. 18, May 19th, 2002まで) 著作権はもちろんそれぞれの著者に帰属します。 最初に性能とは関係ないけど、JDBC関係で最近良いと思った記事をご紹介します。 Eliminate JDBC overhead JavaWorld May 24, 2002, Author Health Decisions ソースコードから生成したクラス図はこちらをご覧下さい。 著者の意見は、「JDBCの使用のためには、SQLの発行、Connectionの管理、トランザクション管理、結果処理、例外のハンドリングなどのいくつかのインタラクションを必要とする。このような定型的な処理は共通化
Apache Cayenne 3.0の現在と今後が分かるインタビュー記事 | Unofficial DB2 BLOG
全然情報を追っていなかったんですが、最近、Java用O/RマッピングフレームワークのApache Cayenneの新メジャーバージョン 3.0がリリースされています。(今は3.0.1がすでにリリースされています） - Apache Cayenne » Cayenne 3.0.1 released - 7 September Cayenneは2002年に最初のバージョンがリリースされた長い歴史を持つフレームワークで、JPAやHibernateとは全く構造や概念が異なっていました。ただJPAが標準に入った事からV3.0でJPA化する事を開発の目標に置いていました。 以下は、その後のCayenneと今後の開発目標について開発者にインタビューした記事です。Cayenneの日本語情報（特にv3.0系のもの）はあまり無いので貴重ですね。 - InfoQ: Apache Cayenne 3.0が、リモー
Using MongoDB in your Django app - implications and benefits
Using MongoDB in your Django app - implications and benefits By Peter Bengtsson, Fry-IT www.peterbe.com 10 years RDBMS experience 10 years NoSQL experience (ZODB) 10 years Python experience But I've never written my own ORM, templating language, web framework or blog engine "MongoDB is a scalable, high-performance, open source, document-oriented database. Written in C++" BSON (JSON + datetime) Aut
s2dao - Seasar - DI Container with AOP -
S2Daoは以下の特徴を持っています。 XMLを使用しないO/Rマッピング機能 最近のフレームワークのO/Rマッピングは、たくさんの情報を記述したXMLを必要としますが、 S2DaoではXML自体を必要とせず、 Javaソースコードにメタデータを記述するだけでO/Rマッピングすることが可能です。 JDBCの知識が不要 Javaアプリケーションにおいて、データベースとの接続・切断などのやり取りにはJDBCのAPIを使用します。 S2Daoでは、そういったやり取りをS2Dao側で処理するので、開発者はJDBCを意識することなくデータベースとのやり取りが実現可能です。 データベースとの接続・切断といった処理をソースコードに記述する必要がなく、作業量の削減にも繋がります。 SQLプログラマとJavaプログラマの分業した作業が可能 S2Daoでは実行するSQL文は外部ファイルとして用意します。 その
Kazuho@Cybozu Labs: setlock を使って cron をぶんまわす方法
« データベースをコピーするモジュール DBIx::Replicate | メイン | Tritonn (MySQL+Senna) の join を高速化 » 2008年01月30日 setlock を使って cron をぶんまわす方法 事前計算や DB 再構築を手軽に実行するのに cron は便利ですが、タスクのまわし過ぎによるサービスのパフォーマンス低下や実行順序の制御を別途行う必要があります。自分は、そのためのツールとして、daemontools の setlock コマンドがお気に入りです。setlock は、flock を用いて、タスクの待機や実行中止を制御することのできる、とても小回りのきくプログラムです。 1-59/* * * * * /usr/local/bin/setlock -nx /tmp/precompute.lock /usr/local/bin/setlock
PostgreSQLがいきなり“9.0”に飛んだ理由 - Database Watch 2010年7月版 − ＠IT
映画「アイアンマン2」はご覧になりましたか？ 映画ではオラクルCEOのラリー・エリソン氏が本人役で出ていて、主人公が「やあ、ラリー」とエリソン氏に声をかけるシーンがあるそうですよ。今月はPostgreSQL 9.0とオラクルのテクノロジー解説です。 PostgreSQL 9.0でNoSQLへと進むか？ オープンソースの世界は動きが素早いです。商用データベース製品ですとバージョンアップは数年に1度という頻度ですが、オープンソースだとおよそ1年に1度、新バージョンを目にするということも珍しくありません。新しい技術やトレンドを素早く取り込もうとするコミュニティの熱意がそうさせるのかもしれませんね。 さて、次に新しいバージョンを出そうとしているのはPostgreSQLです。前の8.4のリリースが2009年7月なので、まだ1年しか過ぎていません。早いです。2009年11月のPostgreSQL Co
MySQLでサービス停止のないALTER TABLEの検討 - SH2の日記
MySQLでテーブルへのカラム追加、インデックス追加やテーブルの再編成などを行うと、その間テーブルに共有ロックがかかってしまいます。そのためこれらのメンテナンス処理は、通常利用者の少ない深夜早朝帯にサービスを止めて実施する必要があります。本日はそれを無停止、オンラインのままでできないかという話題です。 基本的なアイデア メンテナンス対象の元テーブルをコピーして、作業用の仮テーブルを作ります 仮テーブルに対して、カラム追加などの変更を加えます その間、元テーブルに対して行われる更新処理について差分を記録しておきます 仮テーブルの変更が終わったら、記録しておいた差分データを仮テーブルに反映します 差分データの反映が終わったら、元テーブルと仮テーブルを入れ替えます これと似たようなことを考えた方は結構いらっしゃるのではないでしょうか。ただ、言うは易し、行うは難しです。整合性がきちんと取れるかどう
本腰入れてActiveObjects (その1) EntityManager#migrate() - Fly me to the Luna
java-ja忘年会に急遽行ってみたらid:yuripopのサンタコスにヤラレタ。なんだかリア・ディゾンぽかったんだけど、id:yuripopってそういう方でしたっけ？ともかく、普通にかわいくてビビった。id:t_yano氏が終始ドキドキしていたのも頷ける。 そういえばActiveObjectsのEntityManager#migrate()がすごいっていう事を語れとid:yuripopから言われていた気がするので、今日はその辺を頑張ってみることにした。ちなみにActiveObjectsはJAMCircleの中でも利用しています。かれこれ半年くらいお付き合いしてきた成果があるのでつらつらと書いていきますかね。 さて、ActiveObjectsはインターフェースベースのO/Rマッパーです。RailsのActiveRecodeに影響されて作られました。と言っても、他のO/Rマッパーは頭の片隅に
ActiveObjectsのTIPS集 - いろいろ解析日記
ActiveObjectsの操作に役に立つTIPSをどんどん追加していきます！！ 「こんなことはできないの？？」ということがあったら、調べて追記するのでコメントください。 TIPS一覧 エンティティ定義のTIPS メソッドの実装を書く。 DBに保存できない型のsetterやgetterを作る。 エンティティ操作のTIPS エンティティを追加する(1) エンティティを追加する(2) すべてのエンティティ取得する。 条件にあてはまるすべてのエンティティ取得する。 すべてのエンティティ削除する。 条件にあてはまるすべてのエンティティ削除する。 すべてのエンティティのプロパティを更新する。 条件にあてはまるすべてのエンティティのプロパティを更新する。 ■エンティティ定義のTIPS ●メソッドの実装を書く。 Implemantationアノテーションを使います。 エンティティのメソッドの実装が必要な
「Linux-DBシステム構築／運用入門」がすごい - あなたのシステム、ガラパゴス化していませんか？ - kazuhoのメモ置き場
松信さんがやってくれました。 ずいぶん前からデータベースの「正しい」構築と運用方法についてまとめた本はないかなーと思ってました。自分はこれまで、様々なネットワークアプリケーションのプログラミングやデータベースの設計、チューニングを行ってきています*1が、問題が解決できたようには見えても、果たしてそれが最適な解決策だったのか不安に感じることがありました。それは、体系的な知識に欠けているからです。だから、網羅的な教科書がほしいなぁって思ってたんです。 とあるインターネットでこの前、松信さんから「いま書いてる」って話を聞いて、一部を見せていただいたりしたんですが、つい昨日、手元に届きました。やったね☆ 名前は「Linux-DBシステム構築／運用入門」。「入門」と銘打たれているものの、基礎的な知識から、なぜそうなるのか、どう応用すればいいのか、といった点まで広くカバーしている*2、全方位的な隙のな
データベースパフォーマンスに関する、僕が知りうる限り最高の教科書 - レベルエンター山本大のブログ
データベースの醍醐味は、パフォーマンスチューニングにあります。 チューニングによっては、同じ処理でも1時間掛かる場合もあれば、 1秒で終わるということもあり得る世界です。 僕はDBの魅力に取り付かれた者の一人です。 DBという技術の奥深さが気に入っています。 DBを極めると、どこの現場に行っても絶対に必要とされます。 また、どこの現場に行っても正解を導く方程式は一緒なので応用が利くのです。 しかし、その基本原理を体系的に学べる手段はあまりありません。 OracleMasterやMCDBAといった資格試験でも学べることは限られていて あとはWebで調べるなりマニュアルを読むなりするしかありませんでした。 とくに肝であるパフォーマンスチューニングについては、 経験則でチューニングしている部分も多いです。 Oracle、SQLServer、MySQLと色々なDBのチューニングをしてきましたが、
アマゾンのウェブデータベースサービス「SimpleDB」、公開ベータテストへ
ウェブサイト構築といったコンピューティングに利用できるAmazon.comのオンラインサービスシリーズの1つ「SimpleDB」が、限定ベータテストから公開ベータテストになった。 プログラマーはSimpleDBを使うと、データベースのレコードをAmazonに蓄積しそこから特定のデータを引き出せる。今回の公開ベータテストへの移行にともない、Amazon.comはデータ保存にかかる1Gバイトあたりの料金を月額を1.50ドルから20セントへと値下げした。 1年近くまえに発表されたSimpleDBは、「Amazon Web Services」（AWS）シリーズでは新参の方だ。AWSのほかのサービスではデータ処理、生データの保存、コンテンツの配信、さまざまなコンピュータ間で送信されるメッセージの保存が行える。 Amazon.comは今回、少なくとも公開ベータから6カ月間は基本的な利用が無料になること
Drizzle in Launchpad
7.2.3 Released on 2012-08-02 Fix for CTRL-Z for shutdowns. Many updates for JSON server. Improvements comp... 7.1.36 and 7.2.2 Released on 2012-05-23 7.1.36 is maintance release. 7.2.2 includes new work enabling SSL connections... 7.2.1 on 2012-05-08 First alpha release. 7.1.35 has been released. on 2012-05-08 7.1.35 is a maintenance release for 7.1. Fremont beta is out! on 2011-10-25 That's right
SQLAlchemyに対応したDB2アダプタリリース | Unofficial DB2 BLOG
以前より予告されていた通り、DB2のSQLAlchemy 対応アダプタがリリースされました！ 同時にそのアダプタから使用しているibm_dbも0.25にバージョンアップしています。 - IBM releases DB2 adapter for SQLAlchemy (Zen and the Art of Ruby Programming) - Python, DB-API and SQLAlchemy components for IBM Data Servers (Google Code) - ibm_db (Googleグループ) SQLAlchemyは、TurboGearsのORMとしてサポートされています。また、ちゃんと勉強していないので分からないですが、Djangoのバックエンドとしても使用可能なようです。Googleで検索すると色々情報が見つかります。例えば以下のblogエント
IBM releases DB2 adapter for SQLAlchemy | Programming Zen
This article is obsolete. Please refer to the following articles for up do date instructions: Ruby/Rails and DB2 | Python/Django and DB2. Thank you! A while ago I informally announced IBM’s intention to develop an SQLAlchemy adapter for DB2 and Informix IDS. Today, I’m happy to inform you that we have a first working release for DB2 on Linux, Unix and Windows (LUW). Support for Informix IDS is nex
Home | Hypertable - Big Data. Big Performance
Big Data. Big Performance. Hypertable delivers scalable database capacity at maximum performance to speed up your big data application and reduce your hardware footprint. 100% Hadoop Compatible Hypertable seamlessly overlays on top of Hadoop to provide supercharged scalable database infastructure for your big data application. Less Hardware, Lower Cost Hypertable delivers maximum efficiency and su
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Twitterにおける大規模システム構築、3つの原則
