MySQL InnoDBストレージエンジンのチューニング（前編）
本連載では、３回にわたってチューニングの要であるオプティマイザについて説明してきた。オプティマイザは論理的な表現であるクエリを物理的にどう処理するかということを決めるRDBMSの心臓部であると言える。しかしながら、人体が心臓だけで機能しないのと同じように、RDBMSもオプティマイザだけで成り立つわけではない。実際に手足となりデータを操作するのはストレージエンジンだ。今回は、MySQLの代表的な（実質的にはデファクトスタンダードの）ストレージエンジンであるInnoDBの基本的なチューニングについて解説しようと思う。クエリのチューニングとは全くストラテジーが異なるので、これまで連載を読んで頂いている方は、ここで頭を切り替えて欲しい。 InnoDBを使おう！ もし本稿を読まれている方で、特に明確な意味もなくまだMyISAMストレージエンジンを使ってらっしゃるという方には、全力でInnoDBをオス
MySQL InnoDBストレージエンジンのチューニング（後編）
チューニングの基礎 それでは、具体的にInnoDBでどこをチューニングするべきかを見ていこう。 バッファプール 最も基本となるのがバッファサイズの調整だ。ワーキングセットが全てバッファに収まらない限り、バッファプールは大きければ大きいほど良い。その分ディスクアクセスが減るからだ。バッファサイズが小さいと、キャッシュミス時にディスクからReadするのに時間がかかり、I/Oがボトルネックになってしまう。予算のある限りメモリを目いっぱい搭載し、バッファプールに割り当てよう。InnoDBのバッファプールは、innodb_buffer_pool_sizeオプションで設定する。利用可能なメモリは、他の処理に必要な分を除いたすべてをInnoDBのバッファプールに割り当てよう。 innodb_buffer_pool=32G ここで一つ注意がある。innodb_buffer_pool_sizeはバッファプー
「クロスサイトスクリプティング対策」でGoogle検索して上位15記事を検証した
昨年の11月にブログエントリ『「SQLインジェクション対策」でGoogle検索して上位15記事を検証した』という記事を書いたところ、非常に好評で、「次はXSSについて書いてください」という要望をいただいておりました。中々XSSについては手がついておりませんでしたが、ようやく書いてみました。以下のURLで検索した結果の上位15位の記事を検証しました。 http://www.google.co.jp/search?q=クロスサイトスクリプティング対策&pws=0 検索結果は変動するため、私が検索した際の結果をEvernoteの公開ノートとして記録しています。 1～10位 11～20位 記事の「正しさ」の検証基準としては、IPAの「安全なウェブサイトの作り方改訂第5版」を参考に、最低限として以下が記述されているかどうかを確認しました。 HTMLのエスケープ処理を行う 属性値はダブルクォートで囲む
MySQL 5.1.46リリース InnoDB Pluginが正式版に - SH2の日記
出ました。今回は機能追加が1件、バグ修正が55件あります。バグ修正のうちセキュリティに関するものが1件、パーティショニングに関するものが5件、レプリケーションに関するものが7件となっています。 MySQL 5.1.38から本体に付属するようになったInnoDB Pluginですが、バージョンが1.0.7に上がりRCからGA(Generally Available、正式版)となりました。ついに正式リリースです。というわけで何度か繰り返している話題ですが、今回はInnoDB Pluginについて再度おさらいをしておきたいと思います。 InnoDB Pluginの使い方 MySQL 5.1.38以降であればInnoDB Pluginを使うように設定するのは簡単です。/etc/my.cnfに以下の設定を書き加えることでInnoDB Pluginが有効化されます。 ignore-builtin-in
Publisher: RSpec - Relish
RSpec is a Behaviour-Driven Development tool for Ruby programmers. BDD is an approach to software development that combines Test-Driven Development, Domain Driven Design, and Acceptance Test-Driven Planning. RSpec helps you do the TDD part of that equation, focusing on the documentation and design aspects of TDD. Documentation This is the official documentation site for RSpec. Much of the document
MySQL scalability on Linux with sysbench
A recent post at http://jeffr-tech.livejournal.com/6268.html#cutid1 pointed to a possible Linux scalability problem when compared to FreeBSD. Setup 4 core PowerPC64 system Debian unstable (MySQL 5.0.32-Debian_7) Linux 2.6.21-rc3 Baseline A baseline was taken to verify this setup sees the same scalability issue: We see a problem when the number of benchmark threads exceeds the number of cores in th
mosh: MITからモバイル時代のSSH代替品 - karasuyamatenguの日記
http://mosh.mit.edu/ ローミング可能 断続的な接続でも平気 ローカルエコーで快適なレスポンス などの機能をそなえたSSH代替ターミナルソフト。その名も「モッシュ」 iPhone/iPadでウロウロしながらサーバ作業をするのを想定しているようだ。ドキュメントやパッケージの充実度からしてもかなり高質のプロジェクト。こいつら本気でSSHを越えようとしている。 こんな能書き IPが変っても大丈夫 スリープ後もターミナルが生きている 遅いリンクでもローカルエコーにより快適 要は素早く打ち込んでいるときにスクリーンが止っちゃうことがない フルスクリーンモードでも有効 サーバ側と同期化されていない入力はアンダーラインで記される ルート権限がなくてもサーバのインストール可能 サーバは一般プログラムとしてインストールして、それをSSHで立ち上げる SSHをinetdとして使っている感じだ
Mosh: the mobile shell
(mobile shell) Remote terminal application that allows roaming, supports intermittent connectivity, and provides intelligent local echo and line editing of user keystrokes. Mosh is a replacement for interactive SSH terminals. It's more robust and responsive, especially over Wi-Fi, cellular, and long-distance links. Mosh is free software, available for GNU/Linux, BSD, macOS, Solaris, Android, Chrom
【東日本大震災】ヤマト運輸が『宅急便１つにつき10円』の寄付。なんと総額142億3600万円に達していたことが判明！ : はちま起稿
1 名前： 宇宙の晴れ上がり(埼玉県) 投稿日：2012/04/08(日) 06:48:55.34 ID:zFTS3BBcP ?PLT(12000) 東日本大震災の被災地の水産業・農業の再生と生活基盤の復興に向けて「宅急便1個につき10円を寄付する」という私たちの活動は、3月31日をもって終了し、寄付金の合計は約142億3,600万円になりました。 宅急便をご利用いただいたすべてのお客様に心から感謝いたします。 2 名前： ヘール・ボップ彗星(京都府) 投稿日：2012/04/08(日) 06:50:14.51 ID:8pK+ql3F0 寄付ってまだやってたんだー 3 名前： エイベル2218(内モンゴル自治区) 投稿日：2012/04/08(日) 06:54:24.34 ID:CTKdhhIDO １４億個の荷物一年で取り扱うのかよ。 4 名前： 宇宙の晴れ上がり(関東・甲信
起業をする人が知っておくべき、起業の現実とは
起業とは何でしょうか。この数年のウェブ世界では起業論がブームになっているようにも思います。やってみるまでわからないことも沢山あるでしょうが、やってみなくてもわかることもいくつかあると思いますので、私の経験も交えて起業論を話してみます。 ・心構え 独立や起業することは良いことなので、「やってみれば」と言いたいところですが、起業することはやはり責任が重く、ピンチも沢山やってくるので、気軽に薦めるわけにも行きませんね。 起業する前には、とにかく大ピンチを想定してやったほうがよいでしょう。 仕事は全くこない、もしくは仕事を納期までに終わらせられず顧客に大損害を与える、迂闊にも仕事を安請負して大変なことになる、破産して多大な借金を背負う、病気になる、従業員は出社拒否になる、共同創業者とも喧嘩して残ったのは自分一人、新規事業は数年間売上がほぼ０のまま、平日も土日も朝から夜までずっと仕事でそのうえ雑用ば
米Twitter、同社がMySQLに加えた独自コードを「Twitter MySQL 5.5」として公開 | OSDN Magazine
米Twitterは4月9日、オープンソースのデータベース「MySQL」の拡張機能版「Twitter MySQL 5.5」を公開した。サーバーのステータスにアクセスできる変数の追加やNUMA環境下でのメモリ確保の最適化など、同社で開発した機能が追加されている。 Twitterの開発者によると、Twitterではタイムラインやユーザーデータ、ツイート、インタレストグラフなどにMySQLを使用しているという。同社ではMySQLに独自の機能追加を加えて利用しており、これらのコードや情報を共有することを目的としてコードを公開した。 改良点は、MySQLのステータスにアクセスできる変数の追加やNUMA環境下におけるメモリアロケーションの最適化、サーバーサイドにおけるクエリのタイムアウトサポートの強化、InnoDBバッファプールのエクスポートおよび復元機能、SSD向けの最適化の5点。 追加された変数では
さくらのVPSでメモリを抑えたい時に効果的だったこと(CentOS編) | レンタルサーバー・自宅サーバー設定・構築のヒント
さくらのVPSでメモリを抑えたい時に効果的だったこと(CentOS編)
MySQLのパフォーマンスチューニング - モノノフ日記
とある勉強会でSunのエンジニアの人のプレゼンを直接聞く機会があったのでメモったことを公開します。基本的な事が多いんだろうけど、非常に参考になりました。 パフォーマンスとは スループット レスポンスタイム/レイテンシ スケーラビリティ 上記のコンビネーション アーキテクチャとは Connection Thread Pool Query Cache Parser SQLクエリをパース Optimizer Storage Engines アプリによって最適なエンジンを選択すべき サーバのコネクション&スレッド my.cnf max_connection (100) 多すぎるとメモリを消費しきる可能性あり thread_cache_size (8) スレッドをコネクションの切断後にもキャッシュしておく数 一般的には max_connections / 3 sort_buffer_size(2M)
Linked Open Data Integration Benchmark
Linked Open Data Integration Benchmark (LODIB) Linked Data sources on the Web use a wide range of different vocabularies to represent data describing the same type of entity. For some types of entities, like people or bibliographic record, common vocabularies have emerged that are used by multiple data sources. But even for representing data of these common types, different user communities use di
講義案内 | 筑波大学 大学院理工情報生命学術院 システム情報工学研究群 情報理工学位プログラム
筑波大学 理工情報生命学術院 システム情報工学研究群 情報理工学位プログラムの公式サイトです。当学位プログラムの入試情報、教育プログラム、教員・研究室情報などについてご紹介します。
Alien Ant Farm - Smooth Criminal
REMASTERED IN HD!! Official Music Video for Smooth Criminal performed by Alien Ant Farm. Follow Alien Ant Farm Instagram: https://www.instagram.com/alienantfarmofficial Facebook: https://www.facebook.com/alienantfarm Website: https://alienantfarm.com (C) 2001 Geffen Records #AlienAntFarm #SmoothCriminal #Remastered
Homebrewでupdateをしたらエラーが出た - メモ帳
長いこと更新作業を忘れるとでやすいエラーです． $ brew update error: The following untracked working tree files would be overwritten by merge: Library/Formula/cabocha.rb Please move or remove them before you can merge. Aborting Updating 7d2c1da..bfe50e3 Error: Failed while executing git pull origin refs/heads/master:refs/remotes/origin/master 対策の詳しいことは下記のサイトから brew update fails · Issue #5128 · Homebrew/legacy-homebrew ·
８００万かけ芝生に、９６７万で土に戻した中学 : 社会 : YOMIURI ONLINE（読売新聞）
大阪府岸和田市立春木中学校で、全面芝生化されたグラウンドの芝生の一部を、部活動に支障があるとして保護者らがはがした問題で、市教委は１０日、非公開で市議に経緯を説明した。 市教委は、グラウンドの芝生を全てはぎ取り、市側が９６７万円かけて土のグラウンドに戻したことや、府から受けた補助金３００万円は前校長（３月末で退職）が私費で返還することを明らかにした。 府や市教委によると、春木中では、ＰＴＡ関係者や教員らが緑化委員会を設けて芝生化に取り組んだ。府の補助金３００万円に少年サッカー関係者や住民らの寄付金約５００万円を加えて、２００９年度に約９０００平方メートルのグラウンドに芝生を植え付けた。 しかし、表面がでこぼこになるなどしたため、活動に支障があるとして、野球部やソフトボール部などの保護者らが土のグラウンドに戻すよう要望。学校側との話し合いがつかず、１０年１２月、保護者らが芝生の一部をはがす事
Legacy Communities - IBM Community
If you’re looking for a developerWorks forum — Don't panic! You are in the right place. You are here because specific IBM developerWorks forums, blogs and other Connections content have been decommissioned. This page will help you find the content you are looking for, get answers to your questions, and find a new community to call home. Where am I? You are on the IBM Community area, a collection o
うちの会社のサーバー監視方法がおかしい気がする
それなりに大きなどある会社の社内SEだけど、うちのサーバーの監視方法がおかしい気がするあまりにも原始的なので違和感を感じるんだけど、自分にサーバーに対する知識が圧倒的に不足しているので、今やってる監視に本当に意味があるのかよく分からない。詳しい人に教えてもらいたい。 もっとも自分はサーバー管理者ではなく社内のシステム開発をしてる社員なんだけど若手というのもあって、これから説明するめんどくさいサーバーの監視を手伝わされているのが現状 環境監視するサーバーの台数：１５台くらい（社内のNotesサーバーとかファイルサーバー等色々）OSはすべてWindows server2003 or 2008バックアップソフトはサーバーによってバラバラ でどんな方法でサーバーを監視しているかというと以下の手順になる サーバーチェック台帳という用紙をサーバー管理者が自分のところに持ってくる台帳にはサーバーのIPア
すべての日本人が知るべきこと 『日本は自衛のために戦争した』:哲学ニュースnwk
2012年04月10日23:55 すべての日本人が知るべきこと 『日本は自衛のために戦争した』 Tweet 1：名無し募集中。。。：2012/03/30(金) 14:34:15.41 ID:0 日本が対米戦争に踏み切った理由について、連合国軍総司令部（ＧＨＱ）最高司令官だった マッカーサーが１９５１（昭和２６）年、「主に自衛（安全保障）のためだった」と述べた米議会での証言が、 東京都立高校独自の地理歴史教材の平成２４年度版に新たに掲載される。 （中略） 証言は、朝鮮戦争で国連軍やＧＨＱの司令官職を解任されたマッカーサーが１９５１年５月３日、 米上院軍事外交合同委員会の公聴会に出席し、朝鮮戦争に介入した中国への対処に関する質疑の中で言及。 連合国側の経済封鎖で追い詰められた日本が、 「主に自衛（安全保障）上の理由から、戦争に走った」と述べた。 （中略） 渡部昇一・上智大学名誉教授
「そんなことくらいで！？」と驚かれた別れの理由 : まとめたニュース
2012年04月11日 Tweet 「そんなことくらいで！？」と驚かれた別れの理由 人間関係│17:50│コメント(21) 1 ： ケツすべりφ ★ ：2012/04/11(水) 09:23:46.46 0 「冷めスイッチ」がどこにあるかは人それぞれ。他人から見たら小さなことでも、それが原因で別れるカップルも多いようです。そこで『スゴレン』男性読者に聞いた「他人には『そんなことくらいで！？』と驚かれた別れの理由9パターン」を紹介します。 .. 【１】ガムをかむときクチャクチャ音を立てる 「どうしても耐えられなかった...」（20代男性）と、女性が食べ物をかんでいるときの「クチャクチャ」という音が生理的にムリだったケースです。自分では気づかずクチャクチャ音を立てる人は意外と多いもの。食べるときしっかり口を閉じているか、一度確認してみましょう。 【２】質問の答えが9割「なんでもいい」 「何をす
【画像あり】花見客、大量にゴミ放置。無残な光景を嘆くツイートも カナ速
1 ◆JSGFLSFOXQ ＠☆ば ぐ 太☆ Mkつーφ ★：2012/04/11(水) 17:16:19.56 ID:???0 いつの間にか寒さも和らぎサクラの開花宣言が出たと思えば、もう早いところでは桜が散ってしまったところもあるみたいだ。サクラ前線はこれから北上していくと思われるが、都内は今週末までが恒例の春の宴“お花見”のイベントだろう。 中には「すでに花見を終えたよキレイだったよ」という人もいるかもしれない。 例年のことではあるが、サクラを愛でる“お花見”とは「美しいモノを愛でる」イベントであるはずなのに、相変わらずそれとは真逆の行為が行われているようだ。 Twitterでは、心ない花見客が傍若無人に放置して行ったゴミ、食い散らかし飲み散らかしたゴミの山を嘆く写真付きツイートが見られる。 それを見ると、あまりのゴミのすごさに驚かされる。 せっかくのお花見が台無しになりそうなゴ
Instagramの創業者たちに学ぶこと - quipped
インターネット業界での今週一番の話題は、間違いなくFacebookによるInstagramの買収だろう。買収額は株式と現金で10億ドル（800億円）と言われ、Facebookの企業買収としては、最高規模だ。収益ゼロにも関わらず、うなぎ登りのユーザー数で話題を席巻し、あっという間に巨額で買収されるにいたったInstagramのシンデレラストーリーは、6年前に似たような経緯でGoogleに買収されたYouTubeを彷彿させる。 シリコンバレーは内向きで偏った場所なので、連日この買収劇の話題だ。誰が会社の何パーセントを持っていたんだ。5000万ドルの資金調達の直後に買収されるということは、誰かが裏で糸を引いていたんじゃないか。Facebookに買われてしまったInstagramの将来はどうなんだ。個人的には、勇気を持っていいアプリを作り、それがうまいタイミングで評価されたって話でいいじゃんという
路上で涙・上着なし…幼い兄妹のＳＯＳ届かず : 社会 : YOMIURI ONLINE（読売新聞）
子どもたちや親族、近隣の住民は何度も“ＳＯＳ”を発していたが、行政側は幼い命を守ることができなかった。 専門家は「行政がもっと踏み込んだ対応をしていれば、事件を防げたはず」と指摘している。 親族によると、亡くなった小学４年の野本晃輝君（９）と小学２年の妹鈴菜ちゃん（７）が、母親の小百合さん（２８）らとともに江戸川区で暮らし始めたのは昨年９月。父親（３４）の不動産会社への転職に伴い、福岡県から引っ越してきたという。 区などによると、晃輝君は社会科見学などの学校行事に興味を示し、鈴菜ちゃんは縄跳びが得意だった。すぐに学校になじんだが、小百合さんの精神状態が不安定になり、子どもたちも次第に休みが目立つようになったという。昨年１２月には、寒い中、上着も羽織らずに、路上で泣く晃輝君の姿を住民が見掛けていた。 今年１月には、父親が仕事上のミスを苦に自殺。近所の女性が先月、２人だけで手をつないで犬の散歩
「はてな教科書」をgithub上に公開しました - Hatena Developer Blog
こんにちは、id:shiba_yu36です。 はてなのエンジニア陣によって執筆されたウェブアプリケーション作成の基本を学ぶための「はてな教科書」をgithub上に公開しましたのでお知らせします。 はてな教科書は、はてなサマーインターンでも利用されている、約1週間でウェブアプリケーションの基本を身に付けるためのものです。はてなでは日々のウェブ開発で得られたノウハウをこの教科書を継続的に盛り込みながら、インターンシップやエンジニアの新人教育などに利用しています。今回、はてな教科書をgithub上で公開することで、広くPerlを使ったウェブアプリケーション開発に興味を持ってもらえれば、と思います。 いまのところ公開されている資料は、以下の4つになります。 Perl によるオブジェクト指向プログラミング ORM によるデータベース操作 (DBIx::MoCo を使った開発) MVC によるウェブア
英語を真面目に勉強したい人の勉強法:ハムスター速報
英語を真面目に勉強したい人の勉強法 Tweet カテゴリ☆☆☆ 1 ：名前：以下、名無しにかわりましてVIPがお送りします：2012/03/15(木) 22:29:08.39 ID:cGP2GO+a0 ということで何をすればいいのか教えてくれ 3 ：名前：以下、名無しにかわりましてVIPがお送りします：2012/03/15(木) 22:29:35.09 ID:/0xX4A+u0 全く知らんなら単語から覚えたほうが >>3 やっぱり単語とにかく覚えたほうがいい？ 単語帳とか使って学生みたいにコツコツ覚えたほうがいいのかな 5 ：名前：以下、名無しにかわりましてVIPがお送りします：2012/03/15(木) 22:31:39.43 ID:q1KCietP0 目的目標による 8 ：名前：以下、名無しにかわりましてVIPがお送りします：2012/03/15(木) 22:35:0
うちのハイボールジョッキ当たります。 角瓶 サントリー
サントリーウイスキー角瓶（450ml・700ml・1,920ml・2.7L・4L） サントリーウイスキー白角、角瓶〈黒43°〉（700ml・1,920ml・2.7L・4L） サントリー角ハイボール缶（350ml・500ml） ※サントリーウイスキー角瓶180ml／業務用5Lは対象外となります。 ※応募シールが貼付されていない製品につきましては、誠に勝手ながら本キャンペーンの対象外とさせていただきます。 ※応募シール付き対象製品がなくなり次第終了とさせていただきます。 対象製品についている「応募シール」を角瓶450ml/700mlは1枚を1口、1,920mlは1枚を2口、2.7Lは1枚を3口、4Lは1枚を4口、角ハイボール缶350ml/500mlは6枚を1口として、郵便ハガキまたは専用応募ハガキ（50円切手が必要です）に透明テープなどでしっかりと貼り、お名前（フリガナ）・郵便番号（7ケタ）・
原発技術者の“卵”、各大学院で減少 将来性懸念か＋（1/2ページ） - MSN産経ニュース
原子力関連の専門教育を施し、電力会社や原発関連メーカーなどに人材を提供してきた大学院（工学系）への今春の入学者数が昨年度に比べ、減少していることが７日、分かった。東京電力福島第１原発事故に伴う業界の将来性への懸念などが背景にあるとみられ、関西電力の原発全１１基などを抱える福井県の福井大大学院は定員割れの事態に。福島第１原発の事故処理には３０年以上かかるとされ、古い原発の安全確保にも技術者は不可欠で、大学関係者は「有能な技術者を絶やすわけにはいかない」と危機感を募らせている。定員に満たず 福井大大学院工学研究科原子力・エネルギー安全工学専攻（修士課程）の今春の入学者は昨年度より１５人少ない２２人。「３次募集まで行ったが、定員（２７人）に達しなかった」（同専攻担当者）といい、同大関係者は「学生が原発事故の影響に敏感になっているのかもしれない」と話す。 原子力工学専攻や環境工学専攻などが統合され
Designing Great Data Products
Read it now on the O’Reilly learning platform with a 10-day free trial. O’Reilly members get unlimited access to books, live events, courses curated by job role, and more from O’Reilly and nearly 200 top publishers. Book description In the past few years, we’ve seen many data products based on predictive modeling. These products range from weather forecasting to recommendation engines like Amazon'
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.ovaistariq.net/490/a-step-by-step-guide-to-upgrading-to-mysql-5-5/
Install MySQL 5.5 on Ubuntu 10.04
InnoDB Pluginことはじめ。快適ストレージエンジン生活はじまる！
Amazon.co.jp: Writing for Computer Science: Zobel, Justin: 本
パッチを書いてみよう(第17回Nseg勉強会LT)
情報倫理とセキュリティのためのクイックガイド
ZEEN Blog- Learn to Make, Save, Grow Money with Zeen.com
http://blog.nosqlfan.com/html/3874.html
IBM、現代数学の歴史を一望できるiPadアプリをリリース