MySQLでビッグデータ（１億レコード以上のデータ）を作って遊ぼう - Qiita
MySQL(RDBMS)でビッグデータを扱う ビッグデータというのは、概ね通常単一のPCでは扱いきれないデータ量のレコード数のデータのことを言います。 一般的にはDBなどに蓄積されているデータよりも蓄積はされても参照されることのないログファイルを指してビッグデータと呼ばれるようですが、通常参照されることのないデータをわざわざ検索することにそれほど価値や意味を見出すことには疑問が残ります。 また、ログファイルといえどもそうそう１億行にも達するようなデータというものはwebサービスを運営していたとしても早々お目にかかれるものでもありません。 なので、「ワイもビッグデータを扱ってみたい！」とふと思った少年少女そのほかおじさんなどに向けた「手軽に作れるビッグデータ」の方法を記述していこうかと思います。 本記事を試行するにあたって必要なシステム 本記事ではMySQL5.5を利用していますが、5.1以
https://revdev.work/c0d3man/posts/15hd6glceavhl69rycnv
See related links to what you are looking for.
Amazon Aurora (MySQL) Asynchronous Key Prefetchにより、Join性能を10倍以上に高速化 | Amazon Web Services
Amazon Web Services ブログ Amazon Aurora (MySQL) Asynchronous Key Prefetchにより、Join性能を10倍以上に高速化 Amazon Aurora (MySQL)はJoinクエリを一桁以上高速化可能なasynchronous key prefetch (AKP)機能をリリースしました。 この機能は、Batched Key Access(BKA)JoinアルゴリズムとMulti-Range Read(MRR)最適化を使用するクエリに適用され、データ・セットがbuffer pooやquery cacheにない場合のパフォーマンスを向上させます。 我々のテストでは、上記の条件を満たすクエリでコールドバッファプールを使用した場合、クエリのレイテンシが10倍以上向上しました。 この機能は、Amazon Aurora version 1.
ナチュラルキーとサロゲートキーについての議論
とあるブログエントリで「ナチュラルキーを主キーにしてはいけない」という主張を見かけたのでこれに反論しておく。これはリレーショナルモデル的には明らかに間違った考えだからだ。 リレーショナルモデルにあるのはナチュラルキーだけリレーショナルモデルには「サロゲートキー（代理キー）」という概念はない。まずこの点に注意して頂きたい。サロゲートキーとは、データベースアプリケーション開発において実用上必要とされる機能であって、本質的には不要のものである。リレーショナルモデルでは、いわゆるナチュラルキーというものがあれば機能的には十分だからだ。 そのためにはまず「キー」という概念が何を指し示すかということについて正しく理解しなければならない。リレーショナルモデルではキーと呼ばれるものは候補キーとスーパーキーという2つの概念だけである。「タプル（≒行）の値を一意に決定することができる属性（≒カラム）の集合」の
MySQL5.6、5.7性能比較
2015/10/03 phpcon 2015 updated at 2016/01/13 about default_password_lifetime's default will be 0
ASF、スキーマフリーのHadoop向けSQLクエリエンジン「Apache Drill」をトップレベルプロジェクトに | OSDN Magazine
オープンソースプロジェクトを運営する非営利団体Apache Software Foundation（ASF）は12月2日（米国時間）、NoSQLデータベース向けのクエリエンジン「Apache Drill」をトップレベルプロジェクト（TLP）とすることを発表した。 Apache DrillはHadoopやNoSQL向けのSQLクエリエンジン。これを利用することで、スキーマの定義なしにJSONやParquet、HBaseテーブルなどに対しクエリを実行でき、ユーザーは生成されたデータをすぐに利用できる。米Googleのインタラクティブなアドホック型クエリシステム「Dremel」をベースとし、2012年8月にASFのインキュベータープロジェクトとなっていた。 HDFS、NoSQLなどのスキーマフリーのデータストア向けデータモデルを持ち、スタンドアロンのクエリエンジンとしてさまざまなデータソースをサ
高可用性とデータ・シャーディングを実現できるMySQL Fabricとは？
MySQL Fabricは、MySQLサーバー群を管理する統合型のフレームワークです。MySQL Fabricを使うことにより、高可用性（HA）とデータ・シャーディングによる拡張性を実現できます。 MySQLのレプリケーション機能を使って高可用性構成を実現している場合、マスターのサーバーに障害が発生した時に、スレーブのサーバーを新しいマスターに昇格させるフェイルオーバー処理が必要になります。このフェイルオーバー処理を自動化するために、MySQL 5.6ではMySQL Utilities（※）にmysqlfailoverという機能が追加されました。 ※MySQL Utilitiesは、Pythonでかかれた便利なスクリプト集です。詳細は以下の記事も参考にして下さい。 ［参考］Pythonで作られた便利なコマンドラインツール MySQL Utilities mysqlfailoverを使うこと
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【ウェブ セミナー】Azure Database for MySQL/MariaDB/PostgreSQL 入門
このページを見るには、ログインまたは登録してください
逆引きSQL構文集