Ghost sync - 中年engineerの独り言 - crumbjp
Ghost sync MongoDBのレプリカセットではデータの書き込みは常にPrimaryに行わる。 各Secondary(slave)は『基本』Primaryから同期する。 ただし、色々な理由でPrimaryから同期出来ない場合は別のSecondaryから同期をする事がある。 なんでこんな事するのか？ レプリカセットの可用性を高める為。 この機能によって信頼性がネットワークを利用できるようになる。 またDC跨ぎのDR（デザスタリカバリ）など物理的に遠いレプリカを組みたい場合に便利。 本当に直接繋がらないノードを含むレプリカを組むことも出来るが、、現実的ではないか。。 replica set ghost target no good ghost target 同期対象に選んだSecondary(がPrimaryのフリをしている部分) ghost slave Primaryから見て、Sec
愛と苦悩の日記: XAMPP上のPHP+MySQL文字化け解決
７０年代生まれの人々のためのWebサイト think or die の「愛と苦悩の日記」をブログ化 1997/12/13から現在まで、日常生活をテツガクするエッセー集 中国の歌やドラマ関係も。ジェイド・イン（Jade Yin）、alan「懐かしい未来」、『地下鉄の恋』など。 XAMPP for Windows Version 1.5.0-pl1をWindowsサーバに導入して、PHP（文字コードはシフトJIS）からMySQL5.0.15-nt内の日本語データを検索・表示するかんたんなスクリプトを作成したのだが、日本語部分が「????????」と文字化けしてしまう。同じPHPからOracle9iの日本語データを検索・表示しても文字化けしないので、MySQLの設定に問題があることが分かった。 そこでmy.cnfで[mysqld]セクション（サーバ側）の文字セットをsjisに変更したの
Howgry | Universe Of Knowledge - Universe Of Knowledge
Universe Of Knowledge
MacPorts の MySQL で +server variants が obsolute になってた
と、いうわけで、 $ sudo port install mysql5 +server ---> Fetching mysql5 ---> Verifying checksum(s) for mysql5 ---> Extracting mysql5 ---> Applying patches to mysql5 ---> Configuring mysql5 <strong>The +server variant is obsolete. Please install the mysql5-server port instead.</strong> ---> Building mysql5 ---> Staging mysql5 into destroot ---> Installing mysql5 @5.0.83_0+server ---> Activating mysql5 @5.
「はてな流大規模データ処理」を見てきた - もぎゃろぐ
KOF2008：関西オープンソース2008というイベントに来ています。 はてなの伊藤さんの講演があったので、講演メモを公開。 ＃ボクがメモした内容であって、100%言ったとおりに書いてあるわけじゃないので、参考としてご覧ください。 (続き) アジェンダ 大規模なデータ OSのキャッシュ MySQLの運用 大規模データアプリケーションの開発 データの例 はてなブックマークのデータ量：五千万件くらいのデータ量 このデータに対して何百万人がアクセスしてくる状況でどういう作りにするか レコード数 1073万エントリー 3134万エントリー 4143万タグ データサイズ エントリー2.5GB 何の工夫もなく普通にアクセスすると...200秒待っても結果が帰ってこない 大規模データの難しいところ 開発サーバで開発者が作っている時は快適に動いていても、多数の人間がアク
mixi Engineers’ Blog » 圧縮データベースを使おう
チャリンコ通勤による滝のような汗で、朝からTシャツがシースルーになってしまうmikioです。さて今回は、Tokyo Cabinet（TC）のデータベースを各種のアルゴリズムで圧縮して利用する方法についてご紹介します。 圧縮B+木 B+木とは、比較関数の値による順序が近いレコード群を単一のページにまとめ、各ページにB木（multiway balanced treeの略であり、二分木（binary tree）とは違います）の索引を張ったものです。理論的にはレコードの探索も更新も O(log n) の時間計算量で行え、内部ノード（B木）の操作をキャッシュすると実質的には O(1) の時間計算量で探索や更新が行えるという、かなり安定した性能を備えるデータ構造です。その上、レコードが一定の順序に基づいて並べられているので、数値の範囲検索や文字列の前方一致検索が高速に行えたり、カーソルによって順序に基
wordPressのURLを変更・移動する « アスーカル・ITレビュー
wordPressは、データーベースに２種類のアドレスをもっている。 ブログデータアドレス メインindexアドレス 通常上記は同じＵＲＬだが、ブログデータをことなるサーバーに配置する場合用に２つ用意されている。 wordPressのURLを変更・移動する場合、下記のケースは、データーベースを変更する必要がある メインindexアドレスとブログデータアドレスがことなる場合 ドメイン、サブドメインを移動する場合 以上が予備知識 １．バックアップをとる ＵＲＬを変更する前には、データベース、ファイルともに全てバックアップをとる ２．データベースのURLを変更する phpMyAdminにログイン データベースを選択 テーブルwp_optionsを選択、ブラウズする フィールド”siteurl”をさがし、エディットモードにする “siteurl”の値を変更したいＵＲＬにセットする テーブル”wp-
MySQLとコミュニティの不協和音 ビジネスとオープンソースは両立しないか？
代表的オープンソースRDMSを保持するMySQLが、Sun Microsystemsに買収されたことは業界を大いに驚かせた。Sunは今年2月に買収を完了後、約束していたサポートを開始するなど、MySQL効果をアピールしている。だが、今月に入って、Sun／MySQLとオープンソースコミュニティの間に不協和音が生じている。発端は、MySQL製品の次期版について明らかになった内容だ。 Sunは4月14日～17日にカリフォルニア州で年次カンファレンス「MySQL Conference ＆ Expo」を開催。今後の計画を披露した。ここで、Sun傘下となったMySQLが次期版「MySQL 6」についての発表を行い、最大の特徴となるオンラインバックアップ機能を、有料版の「MySQL Enterprise Server」のみで提供することを示唆した。 これを受け、コミュニティの不満が噴出すした。 MySQ
グーグル、データストレージシステム「Bigtable」をウェブサービスとして公開か：ニュース - ZDNet Japan
TechCrunchは、Googleが「Bigtable」データストレージシステムをウェブサービスとして公開することによって、開発者向けのインフラプロバイダーになるための大きな第一歩を踏み出すかもしれないと推測している。このサービスはデータを自動的にインデックス化するとともにストレージとアクセスのためのAPIを提供する、Amazonの「SimpleDB」サービスと同様のものになるのではないかと考えられる。 筆者はこの真実かもしれないニュースについてGoogleに問い合わせ、現在回答を待っているところだ。Googleのクラウドからアプリケーションを提供する優れた能力を考慮すると、同社がストレージのためのAPI、コンピュートサイクル、データベースを提供してアプリケーションサービスのプラットフォームになるのではないかと予測するのも自然である。これはAmazonがSimpleDBとともに「Amaz
SQLインジェクション攻撃の波が再来 ― ＠IT
2008/03/12 セキュリティ企業のラックは3月12日、日本をターゲットとしたSQLインジェクション攻撃が急増しているとし、注意を喚起した。企業や組織などが公開している正規のページが改ざんされて悪意あるWebサイトへのリンクが埋め込まれ、ユーザーがマルウェア感染などの被害を被る恐れがある。 同社のセキュリティ監視センター、JSOC（Japan Security Operation Center）によると、一連の攻撃は3月11日の夜から12日にかけて継続しており、通常の70～100倍の件数に上っている。攻撃の結果改ざんされたページも、検索エンジンなどで確認できる範囲だけでも1万3000ページ以上に達するなど、大規模な攻撃に発展しているという。このことを踏まえると、何らかの自動化ツール、あるいはボットによる攻撃が行われている可能性は否定できない。 この攻撃は、Webアプリケーションに存在す
pam-mysqlを使って仮想FTPサーバを構築する | OSDN Magazine
バックエンドにデータベースを持つ仮想FTP（File Transfer Protocol）サーバを構築することには多くの利点がある。例えばデータベースを使用することによって大量のユーザ情報を一箇所にまとめて保存することができるので管理が楽になる。また仮想サーバのユーザはFTPサーバのリソースのみにアクセスすることが可能でOSのリソースにはアクセスできないため、従来のUnix OSのユーザ認証方法よりもセキュリティを高めることもできる。さらにバックエンドのデータベースを簡単にインストール/設定/管理するための数多くのウェブツールを利用することもできる。また仮想FTPサーバはFTP自体がサポートしていない「@」を含むいくつかの特殊文字もサポートするので、例えば社員の電子メールアドレスをユーザ認証に使用する場合などに便利だ。 pam-mysqlは広く利用されているPAM（Pluggable Au
MySQLをファイルシステムとして使う | OSDN Magazine
MySQLfs を使うと、リレーショナル・データベースMySQLの中にファイルシステムを入れることができる。このファイルシステム中のファイルに含まれるバイト列はデータベースの各行に分割して格納されるため、大きなファイルがある場合もデータベースが巨大なBLOBフィールドをサポートしている必要はない。ファイルシステムをMySQLデータベースに入れておくと、データベースが備えているバックアップやクラスタリング、レプリケーションの機能を利用してMySQLfsファイルシステムを保護することができる。 Fedora、openSUSE、UbuntuにはMySQLfsのバイナリー・パッケージは含まれていない。したがって、MySQLfsを使うにはソースからビルドする必要がある。また、あらかじめmysql-develとfuse-develをインストールしておかなければならない（FUSEにより、一般のプログラム
［MySQLウォッチ］第23回 押さえておきたいバックアップとリストアのポイント
よく，データベースの運用に関する相談の中では，バックアップと可用性(アベイラビリティ)を混同してい場合がある。データベースは，ある瞬間のデータを保存することが目的である。障害が発生した際に保存したデータを再現することにより，復元をおこなう。 可用性は，障害対策として，できるだけ止めずにデータベースを運用することを目的としている。もし，止める場合にも最小限の時間で，復旧することを目的としている。 障害が発生した場合に，速やかに復旧することは，非常に重要なことである。そのため，「レプリケーションやクラスタリングを使用すれば万全」と考えるのは，間違いである。もし，レプリケーションやクラスタリング自身に障害が発生すれば，必ずバックアップデータによって，復旧する必要がある。 また，誤ったデータベース更新を実行した場合，レプリケーションやクラスタリングは，すべてのサーバーが即座に更新を実行する。そのた
Open Tech Press | MySQLデータのバックアップ方法
2007年5月31日10:53 Tom-Adelstein、Bill-Lubanovic（2007年5月29日（火）） ファイルやディレクトリのバックアップは比較的簡単だが、データベースのバックアップとなると、いくつか特別な工夫を施す必要がある。ここではMySQLを取り上げているが、同じ原理はPostgreSQLやその他のリレーショナルデータベースにもあてはまる。 本稿は、最近O’Reillyから出版された書籍『 Linux System Administration 』の抜粋。 MySQLサーバを休みなく稼働させ続ける必要がないなら、以下に示すような圧縮なしのオフラインバックアップ手法が手っとり早い。 MySQLサーバを停止させる。 # /etc/init.d/mysqld stop MySQLのデータファイルおよびディレクトリをコピーする。例えば、MySQLのデータディレクトリ/var
とっとこ走るハムスターデータベース - builder by ZDNet Japan
デジタル時代のITインフラ構築術 仮想化統合、クラウドを経て今「マルチ」へ ITインフラの最適化と継続的進化への道筋 時代はサーバ仮想化からコンテナへ あらためて整理したい企業ITにおける コンテナ活用の基礎と採用メリットを紹介 単純なインフラ製品の販売ではない DX、コンテナプラットフォームの実証など 自社の取り組みで得られた知見を顧客に提案 身近な改善の第一歩！ ニューノーマルな働き方を前提にした これからの時代のWi-Fi環境構築のポイント 非構造化データのデジタル活用へ 社内の文書コンテンツを一元管理 デジタル変革と内部統制の二兎を得るECM ものづくり現場の情報セキュリティ インダストリー4.0は製造業の変革期 工場のデジタル化によるリスクへの対応 クラウドネイティブの実現 モダンインフラの構築・運用の課題解決へ コンテナの可能性を広げるVMware Tanzu ビジネスのための
PostgreSQLへセキュアに接続する方法 - builder by ZDNet Japan
ものづくり現場の情報セキュリティ インダストリー4.0は製造業の変革期 工場のデジタル化によるリスクへの対応 現場のための業務カイゼン 30年以上の歴史をもつDXプラットフォーム 進化を続けるNotes/Dominoのいま デジタル時代のITインフラ構築術 仮想化統合、クラウドを経て今「マルチ」へ ITインフラの最適化と継続的進化への道筋 みんなが使うMySQLの企業活用 なぜ有償サポートがあったほうが良いのか？ 有名テクノロジー企業もOracleに頼む理由 内閣官房やラックが登壇 ゼロトラストが官民一体で サイバーセキュリティを定義する AI/IoTの時代を見据えた挑戦 デル・テクノロジーズ PowerEdge シリーズ その設計思想と特長に迫る アプリケーションモダナイズ 求められている背景にあるビジネスの今 そして、成功の鍵を握るDevOpsの真の意味 特集：IT最適化への道 成功の
mysqlコマンドで、テーブル名とかカラム名の補完(completion)をする方法 - (ひ)メモ
追記: rehash(auto-rehashも含む)すると、SQL文の補完(seleでタブ打鍵とか)が効かなくなるよと、はす向かいの人に教えてもらいました。 個人的には、SQLは「mysql> help select」とかでオンラインヘルプがびょっと出るので、スキーマの補完ができるんならSQLの補完はとりあえずあきらめてもいいかなと思っています。 常々、テーブル名とか補完できるといいなーと思っていたので、ボロっときいてみたら教えてもらいました。あざーーーーっす！ id:mikihoshi++ id:tokuhirom++ id:precuredaisuki++ おかげで効率が300%上がりました。(Benchmark::Stopwatchで計測) http://dev.mysql.com/doc/refman/5.1/en/mysql-command-options.html#option
PogtgreSQLのミドルウェア"pgpool-II"がバージョン2.0に | エンタープライズ | マイコミジャーナル
オープンソースRDBMS PostgreSQLの専用ミドルウェア「pgpool-II」の新バージョン「pgpool-II」が16日にリリースされた。新バージョンではレプリケーションの高速化やオンラインリカバリ機能が実装されるなど、パフォーマンス面で大幅な改善/向上が図られている。 pgpool-IIは、データベースクライアントとPostgreSQLサーバ間を接続するミドルウェア。クライアントからの接続要求をキューイングし、PostgreSQLサーバの負荷を抑えることで、システム全体のスループットを向上させる役割を果たす。また、複数のPostgreSQLサーバを管理することができるため、2台以上のディスクにリアルタイムでハードディスクのバックアップを取ることが可能。これにより、ディスク障害の際もシステムを止めずに運用を継続できる。 バージョン2.0での改良点の一部は以下の通り。 pgpool
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Scuttleでのスパム登録の削除方法 | Drupal.cre.jp
mysqldumpでバックアップ＆復元 - phpspot