Auroraクラスタのレプリケーションクラスタを作成 | 外道父の匠
とあるAuroraクラスタの、完全なデータコピーかつ最新データも元クラスタからレプリケーションで反映し続けるクラスタって作れるのかなーと調べてみると、公式のユーザーガイドにも一般情報にも見つからないしで、裏技臭がしたので書き留めておきます。 実はわりと常識レベルだったりしたらゴメンナサイって感じですが・・・おそらく仕様変更など入らず、ずっと使い続けられるテクニックだと推測できる内容であります。それでは、Auroraクラスタの完全コピーを作りたくなった理由も含めて、まとめていきたいと思います。 Auroraの基本的なレプリケーション Auroraの復習ですが、Writer(=Master) と Reader(≒Slave) は共通のディスクを利用することで、極小さな遅延（10-20ms）でのデータ共通化を実現しています。なので、Writer/Reader間は従来のbinlogを用いたMySQ
MySQL のクエリキャッシュ周りの設定を確認/変更する方法
タイトルのとおり MySQL でクエリキャッシュ周りの設定を確認したり変更したりする方法について。 設定の確認はお馴染み show variables を使います。 mysql> show variables like '%query_cache%'; +------------------------------+----------+ | Variable_name | Value | +------------------------------+----------+ | have_query_cache | YES | | query_cache_limit | 2097152 | | query_cache_min_res_unit | 4096 | | query_cache_size | 33554432 | | query_cache_type | ON | | quer
基礎MySQL ~その３~ アーキテクチャ - Qiita
ストレージエンジン MySQLの特徴の一つ 複数のストレージエンジンをテーブル毎に切り替えて使用することもできる。 MySQL5.5以降InnoDBがデフォルトのストレージエンジン MySQL ストレージエンジンアーキテクチャーの概要 ストレージエンジンでやっていること テーブル定義と物理ファイルの関連付け テーブル、インデックスをどのようなファイル構成、ファイルフォーマットで持つか 独自のインデックス実装 ex)日本語全文検索 独自のキャッシュ機能 ex)innodb_buffer_pool_size(InnoDBのデータキャッシュ) トランザクション機能 外部キー機能 など InnoDBはトランザクション機能など他のDBと似た機能を持つ。 MyISAMではトランザクション機能がない。 BLACKHOLEでは実際にデータを書きこまない。 など、それぞれストレージエンジンの特徴があり、 ア
ふたつのバージョンのMySQLを同時に動かす on AWS Red Hat 7.3 - sakaikの日々雑感～(T)編
ひとつまえの日記の続きです。 最近、MySQL のインストールは rpm(CentOS)、あるいは MySQL Installer(Windows)に頼りっきりで、手動インストールからも、すっかり遠ざかっておりました。そんな折に、簡潔でシンプル*1な yoku0825さんの記事に助けられて、そして年末に「AWS触ってみてよ」と推してくれた方のおかげで、環境と時間と情報とやる気が一気にフルハウス。 さほど大きな苦労もせずに、久々にビルドに成功した*2のに気をよくして、同じマシン（OS）上に複数の MySQLサーバを立ち上げるのをやってみました。 ひとつ前の日記( http://sakaik.hateblo.jp/entry/20170103/build_mysql ) の続きです。ひとつ前の日記では、MySQL 5.6.35 をソースコードからビルドして起動しました。 今回やりたいこと すで
mita2 DB メモ: Group Replication を試す(1) 導入編
MySQL 8.0 で入ると噂されていた、Group ReplicationがMySQL 5.7.17 でリリースされました。 5.7 GAとは何だったのか。。。 とはいえ、早く使えるようになったのは、うれしいです。 ※ Group Replication は追加プラグインとして提供されているため、明示的に使わない限り影響を及ぼすことはありません。 -bash-4.1$ ls /usr/lib64/mysql/plugin/group_replication.so /usr/lib64/mysql/plugin/group_replication.so Group Replication とは MySQLのマスターサーバの冗長化を目的とした機能です。 マルチマスター（マルチライター）のレプリケーション構成がとれる 複数サーバに同時に書き込みが可能。HAProxy などで分散。 冗長化の仕組
MySQLで全文検索をするために必要なこと - 小さな星がほらひとつ
与えられたキーワードに合致するデータをデータベースから取得することを考えた時、完全一致であれば「=」で検索を行うと思います。 では与えられたキーワードを「含む」検索、つまり部分一致を行いたいのであればどうするか。最も簡単なのは「search_column like '%キーワード%'」といった形で、「like」を使いキーワードの前後にワイルドカードを与える方法でしょう。 ですがこれを何の気無しに使うのはちょっと危険。 上記のようなlike検索ではインデックスが利用されないため（※）、全レコードをスキャンします。 かつキーワードを部分一致で探したいようなカラムは、文章等の比較的大きなサイズであると考えられます。 そのため検索コストは大きく、数千〜数万行であればまだ良いかもしれませんが、数十万ともなると利用には耐えられないでしょう。（実体験） ※ただし前方一致検索であれば、最初のワイルドカード
2021欧洲杯可以买球吗
欧洲杯单场可以下注吗(本报记者李志勇) 欧洲杯西班牙克罗地亚预测 再次，更加强化治党治吏治权的治本功能。 真相：荔枝可以说是人们非常喜爱的一种时令水果了。 特斯拉股票当天跌幅为%，脸书则下跌%。 华商报讯借款35万元不还，也不履行法院判决，被纳入失信被执行人名单后，竟然躲在道观内开展"道德与国学"培训。在机构设置上，国家监察机关由同级人民代表大会产生并对其负责、受其监督；监察机关与人民政府、人民法院、人民检察院并列，依法独立行使监察权。 欧洲杯足彩预测平台 ——2009年4月，到河南调研时强调 号召全社会崇尚英雄，学习英雄 铭记英雄,崇尚英雄,捍卫英雄,学习英雄,关爱英雄 我们要铭记一切为中华民族和中国人民作出贡献的英雄们，崇尚英雄，捍卫英雄，学习英雄，关爱英雄。 由于赌客大幅降低，部分境外赌场为了维持运营，又变换手法，勾结国内犯罪团伙，在网上散布无息贷款等各类虚假信息，诱骗中
SlowQuery を検知して Explain で解析し Slack へ通知 - 長生村本郷Engineers'Blog
以下に移行しました。 kenzo0107.github.io
MySQLのAUTO_INCREMENTについて色々と調べてみた。 - Qiita
AUTO_INCREMENTとは カラムに値が指定されなかった場合、MySQLが自動的に値を割り当てる。 データ型は整数。 値は1ずつ増加して連番になる。 基本的なこと。 テストテーブル作成 mysql> CREATE TABLE fruit(id INT AUTO_INCREMENT NOT NULL PRIMARY KEY, name VARCHAR(50), price INT); mysql> DESC fruit; +-------+-------------+------+-----+---------+----------------+ | Field | Type | Null | Key | Default | Extra | +-------+-------------+------+-----+---------+----------------+ | id | in
カジュアル開発者こそ Docker で MySQL を触ろう - Qiita
この記事は MySQL Casual Advent Calendar 2016 の25個目の窓です。 はじめに MySQL Casual はよく "カジュアル詐欺" とか言われて初心者に優しくないみたいなことをネタ的に言われることがあるわけですが、MySQL Casual における ”カジュアル” というのは ”カジュアルにMySQLに関することを話そう” という意味でのカジュアルです。 なので、その内容が初心者向けであれガチ勢であれ、広く気軽にシェアしようと理解いただければと思います。さあ君も今日からカジュアルだ！ と、言いながらタイムラインを検索してみたら @yoku0825 さんが6回くらい "カジュアル詐欺" とツイートしていて自縄自縛ではないかという気もしてきました。 MySQL の検証環境どうやって作ってますか さて、この記事を読まれるみなさんの多くは MySQL を使ってお仕
MySQLでORDER BYをつけないときの並び順 - かみぽわーる
メリークリスマス！🎅🎄 このエントリはMySQL Casual Advent Calendar 2016の24日目です。 今日はこれの話です！ @eagletmt 実装と実行計画依存です(たとえばInnoDBで単一カラムのインデックスが使われた場合のsort orderはprimary keyになるはずです)— Ryuta Kamizono (@kamipo) December 4, 2016 @eagletmt すいません、すこし間違いがありました。もし hoge_id = ? のような絞り込みで単一カラムのインデックスが採用された場合はsort orderはprimary keyになるはずです。InnoDB前提なら基本的に実行計画依存です。— Ryuta Kamizono (@kamipo) December 4, 2016 @eagletmt MySQLでorder by無しのと
MySQL5.6と5.7のちょっとした違いとinnodb_thread_concurrencyの影響 - hiroi10のブログ
この記事はMySQL Casual Advent Calendar 2016の22日目です。 innodb_thread_concurrencyを最近のデフォルトである0と論理CPUコア数の2倍の48に設定した場合に観測出来た小ネタです。ベンチマークのtpsを載せていますが、1回しか取得してないので、割と誤差があると考えられるため、目安程度に見てください。 環境 CentOS 6.6(2.6.32-504.12.2.el6.x86_64) Xeon E5-2643 v2 3.5GHz x 2(2P12C24T) Memory 64GB (8GB x 8, DDR3 1866MHz) HDD SAS 300GB x 2 10k rpm(RAID1 BBU付き) FileSystem ext4 ベンチマークのデータ量はinnodb_buffer_pool_sizeに収まる量 メモリで殴るような
【Python3+MySQL+Twitter】ツイートからデータベースにデータを追加する - 『入る学科間違えた高専生』の日記
はじめに 今回は，自分が以前PHP + MySQLで作ったToDoアプリに自分がツイートしたら新しくタスクを追加したいという 考えから始まりました． github.com 一応リポジトリリンク貼っておきます タスク追加までの流れ ツイート(フォーマットあり) Pythonがツイートを読み取る MySQLにインサート やったこと Twitterアプリ登録 https://apps.twitter.com/apps.twitter.com ここで新しくアプリを作り，ConsumerKeyなどを入手．パーミッションはReadのみでもOK Python関係の準備 Tweepyとmysql-connector-pythonを使用するのでpipでインストール．したいところだったけど後者インストール時にエラーがでた.... Collecting mysql-connector-python Could
MySQLのChar型のデータサイズについて小ネタ - なからなLife
MySQL Casual Advent Calendar 2016 - Qiita の 18日目です。 がんばった。もう小ネタしか出てこない。 MySQLのchar型宣言時の数字は「データサイズ」ではなくて、「文字数」 っていうのは、ワリと有名。 Oracleからやってくると戸惑うところではあるけど、ワリとすぐに慣れるよね。 NCHAR使ってた人ならば、そんなに違和感ないだろうし。 MySQLのchar型で消費するストレージは、必ずしも文字コードベース×文字数「ではない」 char(10)な列を宣言した時、latin1だから1Byte×10、SJISだから2Byte×10、utf8だから3Byte×10、utf8mb4だから4byte×10、と、「かならずしもなるわけではない」のです。 「かならずしも」がポイント。 話をInnoDBに絞ります こちとらMySQL歴やっと1年、デフォルトがI
お兄さんとの約束は守ろう！（MySQLのtx_isolationとbinlogの話） - なからなLife
MySQL Casual Advent Calendar 2016 - Qiita 21日目の記事です。 穴があったら埋めたいタイプの人です。5回目。。。 なお、大トリの25日が空いているみたいですが、3年連続であの方でしょうか？(・_|襖| ある日、MySQLおじさんお兄さんに、、、 って言われたので、約束破ってみたｗ やることは、以下の通り。 binlog出力ON、binlog_format=MIXED まったく同じ構造のテーブルを３つ用意 テーブル1に1000万件用意(ibdファイル1.6GB) ログをFLHSH REPEATABLE-READで、テーブル1からテーブル2へINSERT ... SELECT 全件 ログをFLHSH READ-COMMITTEDに切り替えて、テーブル1からテーブル3へINSERT ... SELECT 全件 ログをFLHSH ログファイル確認 実験結果
アシストの視点「アクセス・パスから見るRDBMSの違い」 | アシスト
商用RDBMSのデファクト・スタンダードである「Oracle Database」、オープンソースRDBMSの両雄である「PostgreSQL」、「MySQL」には、それぞれのRDBMSの個性を活かせる適用領域があります。本稿では、RDBMSの「性能要件」に深く関係する「アクセス・パス」を題材に、「Oracle Database」、「PostgreSQL」、「MySQL」の特長を整理し、適材適所で活用するヒントを探ります。 アシストでは1987年に取り扱いを開始した「Oracle Database」に加え、2009年10月より「PostgreSQL（ポストグレスキューエル）」、2011年10月にはPostgreSQLをベースとしOracle Databaseとの互換性機能を有する「Postgres Plus（ポストグレスプラス）」、Webサービスのシステムにて採用されているRDBMSとしては
続・MySQL データベースからテーブル定義書を生成する - わたねこコーリング
以前書いた「MySQL データベースからテーブル定義書を生成する」が、地味にアクセスがあるようです(当社比)。ナウでヤングで意識高いギークさんには見向きもされないような類の古臭いイシューだと思ってましたが、平成27年のニッポンでは現在進行形の悩ましい問題だったりする訳ですかね？ とまぁそんな訳で続編というか改訂版というか。前回記事では、ダンプした DDL を SQL::Translator という CPAN モジュールを使った perl スクリプトで XML 化した上で、それを XSLT で HTML 変換するという、ちょっとややこしい手順でした。その後、MySQL のダンプコマンド mysqldump には --xml というオプションがあって、こいつを使えば XML 形式の DDL がカンタンに入手できることが判明！(って今頃ヲイw つまり、 mysqldump --no-data -
phpMyAdmin on docker が便利すぎる - Qiita
Docker使ってWEBシステムを開発している場合、コンテナでMySQLサーバーを起動することが定石だと思います。 で、このDBの中身をGUI的に操作したい場合、3306ポートをEXPOSEしちゃう？ ....そんな必要はありません！ DBをGUI的に操作するコンテナ、つまりphpMyAdminコンテナがあればいいんです！ phpMyAdminの公式Docker imageのページはこちら https://hub.docker.com/r/phpmyadmin/phpmyadmin/ 公式ならほぼ安心ですが、Docker imageには危険なexploitが埋め込まれていたりすることもあるので、Dockerfileも念のため確認しておきます。 やっぱalpineベースなんですね〜。万全を期すならばこのDockerfileを自前でビルドでしょう。 Dockerfileをダウンロードしてしかる
MySQLのMyRocksストレージエンジンの話を中の人から聞いた - Qiita
この記事はfreee Engineers Advent Calendar 2016の...っと、もう空きがないじゃないか! というわけで、急遽MySQL Casual Advent Calendar 2016の16日目としてお送りします。 MySQLエキスパートであるところのFacebook 松信嘉範さんによるMyRocks紹介プレゼンを聞く機会に恵まれたので、本人の許可を得てその内容を公開します。 経緯 松信さんと自分は以前に同じ会社で働いていた元同僚で、彼のデビュー作「現場で使える MySQL」の元となったDBマガジンの連載時にちょっとお手伝いした縁もあり、その後も交流が続いております。 今回は松信さんがちょいと日本に寄るというので食事に誘ったのですが、ついでなので私の現職 freee株式会社のオフィス見学に来てもらい、「せっかくだから何かしゃべって」という図々しいお願いをしたところ、
最速で日本語環境のMySQL Dockerコンテナを建てる方法 - Qiita
はじめに MySQLの公式Dockerイメージは文字コードがlatin1だったり、タイムゾーンがTSだったり、localeがPOSIXだったりと、日本語環境で使うにはかなり不自由な感じです。 以下のdocker-compose.ymlを使うことで日本語環境をすぐに建てることが可能です。 最速で日本語環境を使いたい人はこちらをベースにしてみてください。 ファイル 以下のような構成を想定しています。 # Dockerfile_MySQL FROM mysql:5.6 # Set debian default locale to ja_JP.UTF-8 RUN apt-get update && \ apt-get install -y locales && \ rm -rf /var/lib/apt/lists/* && \ echo "ja_JP.UTF-8 UTF-8" > /etc/lo
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
