タグ

DataBaseとClusterに関するsilver_arrowのブックマーク (18)

  • Microsoft Azure: クラウド コンピューティング サービス

    Azure を探索 Azure について 安全かつ将来を見据えた、オンプレミス、ハイブリッド、マルチクラウド、エッジのクラウド ソリューションについて調べる グローバル インフラストラクチャ 他のどのプロバイダーよりも多くのリージョンを備える持続可能で信頼できるクラウド インフラストラクチャについての詳細情報 クラウドの経済性 Azure の財務上および技術的に重要なガイダンスを利用して、クラウドのビジネス ケースを作成する 顧客イネーブルメント 実績のあるツール、ガイダンス、リソースを使用して、クラウド移行の明確なパスを計画する お客様事例 成功を収めたあらゆる規模と業界の企業によるイノベーションの例を参照する

    silver_arrow
    silver_arrow 2009/07/28
    MSとHPのSQLServer2005検証の公開資料。ちなみにハードはSuperdome+EVA、
  • Yahoo!オークションでのMySQL 冗長化技術

    ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちはオークション事業部プラットホーム技術のチャックです。 オークションでは一部サービスに RDBMSMySQL を使ってサービスをご提供させていただいております。 オークションでは多くのお客様よりアクセスを頂いておりますので、大量の更新、参照の処理速度に優れた MySQL を選択し、お客様にストレスなくサービスをご利用いただけるよう 日々業務に取り組まさせていただいております。 しかし、精密機器には故障がつきもので、サービス運用の観点からは 「機器が故障するのはしかたない、しかしそれをいかに早く復旧させるか」 といったことを念頭に入れております。 実際には、障害が起こってから復旧させるのではなく、障害が発生した場合に

    Yahoo!オークションでのMySQL 冗長化技術
    silver_arrow
    silver_arrow 2009/03/30
    Dual-Master + Slave.
  • PostgreSQLで効率的な負荷分散を実現し、モバゲーやmixiを追撃 ― TechTargetジャパン

    オープンソースのPostgreSQLでシステムを構築 10代、20代を中心に急激な普及を見せる“ケータイSNS”。会員数が865万人に達する「モバゲータウン」や月間118億ページビュー(PV)を誇る「mixi」(約6割がモバイル経由)など、大手SNSサイトが存在感を増している(数値はいずれも2007年12月現在)。そうした中で先行組を激しく追撃しているのが、オープンドアが運営する携帯電話向けのSNSサイト「大集合NEO」だ。 2007年1月にスタートした大集合NEOは、SNSのみならず、アバターゲーム小説、動画、日記、チャットなどのサービスをすべて無料で楽しめるのが特徴だ。アバターやサイト内通貨の使い勝手の良さで先行サイトと差別化を図り、2007年夏に50万人だった会員数が2008年2月時点で2倍の100万人に達している。 その大集合NEOのシステム基盤を担っているのは、MySQLとオ

    PostgreSQLで効率的な負荷分散を実現し、モバゲーやmixiを追撃 ― TechTargetジャパン
    silver_arrow
    silver_arrow 2008/02/29
    pgpool II でLoad Balance + Slony-I でレプリケーションしてると。
  • Tokyo TyrantによるHAハッシュDBサーバの構築 - mixi engineer blog

    来年のバレンタインデーに、正確には「2009-02-14T08:31:30+09:00」に、UNIX時間が「1234567890」を迎えることを発見してちょっと嬉しいmikioです。さて、今回は高効率ハッシュデータベースサーバTokyo Tyrantを用いてHAハッシュデータベースを構築する手法についてご紹介します。ちょっと難しいし非常に長い内容なのですが、最後までお付き合いくださいませ。 可用性と保全性 HA(High Availability:高可用性)とは、可用性(Availability)が高いことです。それでは説明になっていないので詳しく言い替えますと、システムに障害が起きにくくすることと、たとえ障害が起きたとしてもできるだけ迅速に復旧できるようにすることです。データベース系のシステムはユーザのデータを管理するという中核的役割を担うため、可用性を高めることは最も重要な課題となりま

    Tokyo TyrantによるHAハッシュDBサーバの構築 - mixi engineer blog
  • 8.2のウォームスタンバイ — NPO法人 日本PostgreSQLユーザ会

    by 永安悟史@広報担当 — posted at 2006-12-23 00:29 last modified 2006-12-23 00:30 ふと、8.2で利用可能になった、WALの転送を使ったアクティブ・スタンバイ構成のレプリケーションの動作概要を図にしてみました。 基的には、アクティブ側でアーカイブしたWALファイルを、スタンバイ側で適用しているだけですので、実は8.1でも実現は不可能ではなかったのです。 が、8.2で変わったこととしては、archive_timeoutパラメータでWALアーカイブの間隔を調整できるようになったことが挙げられます。図で言うと、「緑色の矢印の長さ」がそれに当たります。このパラメータによって、クラッシュの直前において、どの程度のトランザクションのロストが発生するか、ということを調整できるようになったわけです。 実はこれ、かなり面白い機能なんじゃな

    silver_arrow
    silver_arrow 2007/01/19
    PostgreSQL 8.2のウォームスタンバイの解説。定期的にアーカイブを取っていざというときはフェールオーバー。8.2からアーカイブする間隔を調整できるようになった..と。
  • DBサーバのストレージをDRBDで冗長化するのは是か非か - (ひ)メモ

    LinuxにはDRBDというものがあります。 DRBDとは何か? 簡単にいうと、ミラーリングです。ミラーといっても、RAID-1のようにディスクtoディスクではなく、2つの異なるサーバ間のネットワーク越しのミラーリングです。 RAIDの場合は、ディスク故障の耐性は高まりますが、サーバのほかの部分(電源など)が壊れると元も子もありません。DRBDだと、そういった場合の障害にも対応できますね。 DRBDには普通のブロックデバイスとしてアクセスできます。つまり、mkfsしてmountしてフツーのディスクのように使えます。 で、 A quick tour of DRBD - MySQL-dump は、そのDRBDを使って、MySQLのストレージを冗長化するという話。(だと思う。ナナメ読みなので) しかーし、いくつか危険な点があるので、この構成はやらんほうがいいというのが個人的な意見。以下、その理由

    DBサーバのストレージをDRBDで冗長化するのは是か非か - (ひ)メモ
    silver_arrow
    silver_arrow 2006/10/24
    DBのストレージにDRBD使うと論理的にデータが壊れたり、DBプロセスが稼働中だとデータ壊れるかもぉ。という話。
  • データベースミラーリングを構築してみよう

    主な内容 --Page 1-- データベースミラーリングの構築手順 サーバの用意 --Page 2-- プリンシパルの完全バックアップとミラーへの復元 --Page 3-- データベースミラーリングセッションの構成 まとめ 前回の「高可用性は低コストなデータベースミラーリングで」では、データベースミラーリングの概要について取り上げ、その仕組みや動作モード、利点など基的な内容を確認しました。 今回は実際にデータベースミラーリングの構築を行ってみたいと思います。データベースミラーリングは基的に3台のサーバを用意して構築しますが、今回は試験利用ということで、1つのサーバに3つのインスタンスを用意し、サンプルデータベースであるAdventureWorksをミラーリング対象のデータベースとして構築します。 データベースミラーリングの構築手順 データベースミラーリングの構築に際し、Transact

    データベースミラーリングを構築してみよう
    silver_arrow
    silver_arrow 2006/10/21
    SQLServer 2005のミラーリング設定の話。いちおメモ。
  • 高可用性は低コストなデータベースミラーリングで

    主な内容 --Page 1-- SQL Server 2005で提供されるフェールオーバー・ソリューション 手軽に高可用性を提供するデータベースミラーリング --Page 2-- データベースミラーリングの動作モード --Page 3-- クライアントからの透過的な接続 まとめ 24時間365日利用され、重要性や機密性の高い情報が大量に蓄積されるデータベースにとって、高可用性は避けては通れないテーマです。ハードウェアやソフトウェアによる不調などによってデータが紛失、あるいはサービスが停止してしまうような状況は可能な限り回避する必要があります。 SQL Server 2005では、高可用性ソリューションとしてフェールオーバーを実現する3つの機能が提供されます。以前から提供されてきた「フェールオーバークラスタリング」「ログ配布」に加えて、新たに登場した「データベースミラーリング」です。 SQL

    高可用性は低コストなデータベースミラーリングで
    silver_arrow
    silver_arrow 2006/09/21
    SQL Server 2005でミラーリングを行う方法。同期ミラーが2通りと非同期ミラー。
  • [MySQLウォッチ]第28回 MySQL 5.1期待のクラスタリング機能

    数カ月前にMySQL 5.1 GA版 のリリース見通しを5月と記述したが,残念ながら下半期に突入した現在もBata版にとどまっている。バージョン5.0から5.1へのアップは,番号としてはポイント以下のマイナー・バージョンアップだ。しかし,非常に大きな期待を持って待っているユーザーも多いだろう。それは,MySQL 5.1 からMySQL Clusterがストレージ対応になるからだ。 今回は,MySQL 5.1 GA版 のリリース準備として,期待の高まるMySQL Clusterのストレージ対応を紹介する。 MySQL Cluster の登場 もともとMySQL Clusterは,NDB Clusterという商品だったものをMySQL ABが自社製品として取り込み,MySQL 4.1.3 (RPM版はMySQL 4.1.10)から実装が始まった。それ以前は,標準機能のReplicationかサ

    [MySQLウォッチ]第28回 MySQL 5.1期待のクラスタリング機能
    silver_arrow
    silver_arrow 2006/07/19
    MySQL 5.1からの新クラスタ機能&レプリケーション機能について。いいねぇこれは。
  • [PostgreSQLウォッチ]第28回 パラレルクエリを実現したpgpool-II

    既に連載でお伝えしたように,来る7月8日から9日まで,PostgreSQLの誕生10周年を記念してPostgreSQL Anniversary Summitがカナダのトロントで開催される。筆者もこの歴史的なイベントに参加する予定である。 pgpool-IIプロジェクトとは PostgreSQL AnniversarySummitでは様々なPostgreSQLにかかわるセミナーが予定されているが,筆者のグループもプレゼンを行うことになった。今回発表するのは「pgpool-II」である。pgpoolについては既にこの連載でも何回か取り上げている(第9回 負荷分散が可能になったpgpool 2.0)。pgpool-IIはその後継プロジェクトである。 pgpool-IIプロジェクトは,独立行政法人 情報処理推進機構(IPA)の「オープンソースソフトウェア活用基盤整備事業」の支援を受けて,SRAと

    [PostgreSQLウォッチ]第28回 パラレルクエリを実現したpgpool-II
    silver_arrow
    silver_arrow 2006/06/28
    pgpool-Iとpgpool-IIの違いとか。
  • 第4回北東アジアOSS推進フォーラムでPostgreSQLの検証結果を発表

    写真3●記念品の万年筆。もちろん中国製で,レトロな感じがよい味を出していた。ブランドは「英雄」。その昔日でも「300 円の万年筆」で一世を風靡したものである。品は格的な吸入式で,結構使えそうな感じがした 「第4回 北東アジアOSS推進フォーラム」で,私,SRAOSSの石井達夫は,PostgreSQLの検証結果を報告した。ソウルで開催された第3回にも参加しており,今回で北東アジアOSS推進フォーラムへの参加は2回目だ。 中国は北京に3度ほど行っているが,天津は初めて。日からの直行便は少ないので,一旦北京に入ってから車で天津に向かう。これが3時間位かかる。更に今回会場になったホテルはかなり郊外にあるところなので,ほとんどホテルに缶詰め状態ですごすことになったが,その分仕事に集中できたと言えるかもしれない。できれば次回からは北京や上海のように,直行便があるところで開催してくれると助かるの

    第4回北東アジアOSS推進フォーラムでPostgreSQLの検証結果を発表
    silver_arrow
    silver_arrow 2006/05/29
    PGClusterとpgpool、Slony-Iのパフォーマンス比較。
  • NTTデータがOracle RAC対抗のPostgreSQLクラスタ開発,2006年度に実システムに適用へ

    NTTデータと子会社のNTTデータ先端技術が,オープンソースDBMS PostgreSQLでクラスタリング機能を実現するソフトウエア「RitaDB(開発コード名)」を開発したことがITproの取材で明らかになった。検索処理の負荷分散が可能なPostgreSQLクラスタリング・ソフトウエアは多いが,RitaDBOracle RAC(Real Application Clusters)などと同様に検索だけでなく更新性能の向上も実現する。2006年度中に実システムへの適用を目指す。 RitaDBは,クライアントからのリクエストを受け付けて振り分ける「コーディネーター・ノード(C-Node」,SQL文を実行する「サブ・ノード(S-Node)」,トランザクションを管理する「トランザクション・ノード(T-Node)」,ログを管理する「ログ・ノード(L-Node)」で構成する。C-NodeおよびS-N

    NTTデータがOracle RAC対抗のPostgreSQLクラスタ開発,2006年度に実システムに適用へ
    silver_arrow
    silver_arrow 2006/03/27
    『RitaDB』。PostgresForestとは別のPostgreSQLクラスタ。更新も負荷分散、かつ同期処理も自動。たしかに、良さそうだけど最低4ノード必要になるのかぁ。大規模システムじゃないと、SlonyとかPostgresForestの方がウマーかも。
  • 【レポート】PostgreSQLエグゼクティブセミナー - PostgreSQLで高速データウェアハウスBizGres - 大規模クラスタリング対応も | エンタープライズ | マイコミジャーナル

    SRA OSS日支社主催の「PostgreSQLエグゼクティブセミナー」が22日、品川のホテルラフォーレ東京で開催された。「PostgreSQL開発者による米国最新事情」と銘打たれた今回のセミナーは、主にSI事業者のプロジェクトマネージャ層を対象にしたもの。オープンソースRDBMS「PostgreSQL」の開発コアメンバによる最新技術動向の解説が直接聞けるとあって、会場には多数のユーザが集まった。稿では当日行われた講演の中から、Josh Berkus氏による「BizGres MPP」のセッションをレポートしよう。 Berkus氏はPostgreSQL体の開発に携わる一方、米GreenPlumでデータウェアハウス向けシステムの開発に従事している。ここで言う「データウェアハウス(以下DWH)」とは、「ビジネスインテリジェンス」「データマイニング」「意思決定支援」「OLAP」等のキーワード

    silver_arrow
    silver_arrow 2006/02/28
    GreenPlum社によるデータウェアハウス向けポスグレ。OpenSource版とプロプライエタリなクラスタ版があるらしい。
  • eliba.comで10台のPostgreSQLサーバによるクラスタリングシステムが稼働

    オンライン書店のエリバドットコムで、オープンソース・データベースの並列実行ではグローバルで見ても最大規模となるシステムが稼働し始めた。 ターボリナックスは2月8日、ビブロポートが運営するオンライン書籍販売サイト「eliba.com」が、PostgreSQLをロードバランス・クラスタ構成とするためのソフトウェア「QueryMaster」を採用し、2006年1月に格稼働を開始したと発表した。10台のオープンソースデータベースサーバを並列実行するこの事例は、PostgreSQLでの多重化度としてはグローバルで見ても最大規模となる。 QueryMasterは、PostgreSQLをクエリ負荷分散し、信頼性の高い大規模仮想DBを実現するためのソフトウェアで、データ更新時のオンラインレプリケーションやGUIによる容易な運用などが特徴。 ビブロポートは、2004年4月よりeliba.comを運営してい

    eliba.comで10台のPostgreSQLサーバによるクラスタリングシステムが稼働
    silver_arrow
    silver_arrow 2006/02/19
    QueryMasterって、TurboLinuxなのか。10台にして、どのくらいスループット向上になったのかな。多重度を上げると、性能向上が集約しやすいからなぁ。x6とかかな。
  • スマートスタイルがMySQL向けクラスタリング・ソフトを発売

    スマートスタイルはMySQL向けクラスタリング・ソフトウエア「m/cluster」の販売を開始した。MySQLはオープンソースのDBMS。m/clusterは米Continuentが開発したクラスタリング・ソフトで,負荷分散機能とフェールオーバー機能を備える。 m/clusterは複数のMySQLサーバーに処理を振り分け,負荷分散を行う。MySQLは非同期にデータを複製するレプリケーション機能を標準で備えるが,m/clusterは複数のMySQLデータベースの内容をを完全に同期させるという。またあるサーバーに異常が発生してもサービスを継続でき,サーバー増設時にもサービスを停止させる必要がないとしている。 2006年5月には,日語版を出荷する予定。価格は1CPUあたり税込み58万8000円。

    スマートスタイルがMySQL向けクラスタリング・ソフトを発売
  • データベースクラスタリングミドルウェア Sequoia 2.6公開 | エンタープライズ | マイコミジャーナル

    Continuent.org, the Sequoia Projectは30日(仏国時間)、Sequoiaの最新版となるSequoia 2.6を公開した。Sequoiaは複数のRDBMSに対してフェイルオーバやロードバランシング、クラスタリングなどの機能を提供するJavaで実装されたミドルウェアソリューション。 Sequoia 2.6はApache License Version 2.0のもとで公開されているオープンソースソフトウェア。JRE 1.4かもしくはそれ以降の環境で動作する。JMXベースの管理およびモニタリング機能も統合されている。 Sequoia 2.6は既存のアプリケーションやデータベースに変更を加えることなく、アプリケーションとデータベースの間に挿入するようにして使用することができる。クラスタリングやフェイルオーバの対象とするRDBMSもJDBCに対応していれば同種である必

    silver_arrow
    silver_arrow 2006/02/01
    ちょっと面白そう。
  • http://pcweb.mycom.co.jp/column/yetanother/033/

    silver_arrow
    silver_arrow 2005/11/18
    PostgreSQL版RAC(?)
  • 【コラム】Yet Another 仕事のツール (30) レプリケーションシステム「Slony-I」の導入 | エンタープライズ | マイコミジャーナル

    pgpoolについては、負荷分散機能の性能やデッドロックを防ぐStrictモードの動作など、まだ書き残していることがいくつか残っているが、まずは一通り他のレプリケーションシステムもおさえた上でないと比較検討もしにくい。そこで、今回からしばらくは「Slony-I」を試してみることにしよう。 Slony-Iは、pgpoolやこのコラムで次に紹介する予定の「PGCluster」と同様、PostgreSQLデータベースを複製するレプリケーションシステムだ。最近、バージョン1.0としてリリースされたばかりだが、PostgreSQLのコアメンバーの一人であるJan Wieck氏が中心となって開発されていることもあって、多くのデータベース管理者の注目を集めているようだ。まずは、ざっと特徴を眺めておこう。 Slony-Iは、ひとつのマスタと複数のスレーブで構成される、シングルマスタ、マルチスレーブのシステ

    silver_arrow
    silver_arrow 2005/11/18
    PostgreSQLのクラスタソフトって、結構いっぱいある。
  • 1