せっかくなので、Azure の Standard Storage でもベンチマークをやってみました。A4サイズのOpenLogic (CentOS)インスタンスで、ベンチマークツールにOracle ORIONを使って測定しました。 Oracle ORIONの使い方は、こちらのページを参考にしました。 hesonogoma.com 先に結論だけ書いておきますと、 ホストキャッシュ無し： 42 IOPS 読み取り専用： 27IOPS 読み書き： 26 IOPS という残念な感じで、まあこれは用途に合わせて正しいストレージを選択しましょうというところですね。最後に載せてありますが、シーケンシャルライトであればそれなりに速度も出ますし、ストライピングでもある程度性能を稼ぐこともできますので、Standard Storage でまかなえる範囲もそれなりにあるとは思います。 お値段もそれなりに違います

手元にNVMe SSDがあったので、自分でベンチマークを取ってみたログ。 NVMeってのは、ストレージデバイスを接続する際の規格で、従来でいうSATAインターフェースの仲間みたいなもの。NVMeの詳細は以下のリンク先に記載があるので読んでいただきたい。 NVMeは、SCSIやSATA（Serial ATA）と同じく、ストレージを接続するための規格だ。パイプラインやランダムアクセスなど、メモリーベースのストレージであるSSDの特徴を活用できる。また、SATAやAHCIの登場から現在までの間に進化した、データのレイテンシー（遅延時間）短縮のための手法も反映している。 具体的な改良点としては、4KBの転送に必要なメッセージが2つではなく1つで済む点や、コマンドを処理するキューが1つではなく複数になっているという点がある。「複数」というのは、実に6万5536個である。これにより、多数のディスクI/

岩本です。3月に東京営業所から本社技術部へ異動しました。 GlusterFSとは、現在レッドハットが開発を進めているOSSでの分散ファイルシステムです。 複数のサーバで１つのディスクボリュームを作成したり、データの冗長を行うことができます。 今回は2台のUbuntuサーバで構築します。最終的にはKVMのVM格納領域として使用、最小構成でのKVM冗長構成を構築する予定です。 ■構成 SV001　Ubuntu 14.04.1 IPアドレス：10.0.0.1　RAIDなし SV002　Ubuntu 14.04.1 IPアドレス：10.0.0.2　RAIDなし ■構築 （SV001・SV002上で共に実行） sudo apt-get install python-software-properties sudo add-apt-repository ppa:semiosis/ubunt

公称シーケンシャルリード2400Mバイト/秒の超性能 「Intel SSD 730」は、ワークステーション、および、クライアントPC向けSSDの新シリーズだ。従来通りの2.5インチサイズのモデルだけでなく、拡張カード形式のモデルを用意している。接続はPCI Express 3.0 x4ネイティブとなっており、拡張カード型ではPCI-Expressスロットに、2.5インチ型はコネクタ仕様のPCI-Expres規格で4レーン対応可能なSFF-8639に接続する仕様となっている。現時点ではSFF-8639に対応する環境の入手は難しいことから、ユーザーが利用しやすいのは、このPCI-Expressカード形式のモデルになるだろう。

先日のImpala Cookbookの非公式日本語版の続きです。先日は「クラスタのサイジングと推奨ハードウェアImpalaのメモリ使用量」でした。本日は「Impalaのベンチマーク」です。 ベンチマークも取り方によっては全く意味がありません。また、本番環境で動作させるのと全く違うワークロードのベンチマークも、本来期待しているのとはかけ離れた結果がでるかもしれませんね。 例によって駆け足で日本語化してるので、間違いがあればコメントに書き込むかTwitterでメンションしてください。 原文: [1] The Impala Cookbook http://www.slideshare.net/cloudera/the-impala-cookbook-42530186 どのようにImpalaが機能し、どうスケールし、現在のシステムとどう比較するのかを理解する クエリのスループットと同様にクエリのレ

はじめに こんにちは植木和樹です。Amazon Linux AMI 2014.09がリリースされて随分と経ちましたが、リリースノートにちょっと目を引いた記載がありました。 Amazon Linux AMI 2014.09 Release Notes New packages In addition to the features above, here are some other new packages added based on customer requests: ： stress-1.0.4 ： stressというのはCPUやメモリーの負荷を発生させるツールです。サーバーの高負荷状態でのアプリケーション挙動を確認する際に使用します。便利なツールなので使い方をおさらいしてみました。 stressの使い方 プロジェクトページ stressツールのプロジェクトページはこちらです。 s

By Bill Dickinson オンラインストレージサービスBackblazeが、自社のサービスに使用してきた200種類、合計約3万5000台の運用データから算出した、「HDDの信頼性データ」の2014年9月最新版を発表しました。以前からメーカーやモデルによって壊れやすさの偏りは明らかでしたが、その傾向はあまり改善されていないようです。 Backblaze Blog » Hard Drive Reliability Update – Sep 2014 https://www.backblaze.com/blog/hard-drive-reliability-update-september-2014/ どこのメーカーのHDDが信頼性が高いのかが一発で分かるグラフがこれ。灰色の棒グラフは2013年通年での故障・エラー発生率、色の付いた棒グラフは2014年6月までに生じたエラー発生率を示し

dotCloudが開発しているLinuxコンテナ型仮想ソフト「Docker」が巷で話題ですね！ これはLXCにストレージドライバとしてunionfsから派生したaufs（CentOSではLVMのThin Provisioning）を組み合わせた所がキモで、つまりファイルシステムの差分管理が出来る特徴があります。 なんだか仕組みを想像する限りディスクI/Oが遅そうな印象ですが、どの程度のものかベンチマークを取りました。 ストレージドライバ Dockerは元々aufsで作られていたのですが、それはAUFS対応のカーネルを入れる前提です。 これはRedHat系ディストリビューションへの対応を行う上での大きなハードルでした。 そこで同様にCoW(CopyOnWrite)を実現出来るLVMのThin Provisioningが採用されています。 ドライバがaufsなのかLVMを扱うためのdevice

z800にHP Proliant用 FUSION-IO 600282-B21 640MB（320GBx2）を搭載しました。試しに1枚では無く2枚搭載してOS認識できるかの実験です。 こんな感じで搭載しました。実際は3枚つけてみたのですがOS上で3枚目が認識出来ませんでした。 Windows7上では、初期状態では認識できていません。そこで、ユーティリティソフトをインストールすることでこのように認識出来ました。 認識出来たストレージをWindows7上でストライピング（RAID０）を構築します。 この状態で、CDMを実行しました。 全体的にかなりの数値がでました。約1TBの容量を確保してこの数値は作業効率が大きく向上できます。 ちなみにカード1枚ではこのぐらいですのでシーケンシャルは1.5倍近い値となっています。 Z800で搭載できるHDDの数は4台です。SSDは1台だけではそれほど速度は出ま

現在いくつかのWebサイトをホストするためにさくらインターネットのVPSを契約しているのだが、今後はスケールが必要になるくらいのサービスを展開したいと妄想しているのでさくらのクラウドに移行を考えている。ただし、VPSとクラウドでは同等の数値スペックにすると価格差が5倍以上開いてしまう。クラウドは非常に高価格になるがディスクIOが早いなど宣伝している部分があるので簡単なベンチマークで比較してみた。 VPSもクラウドも双方ともに他ユーザの利用度合いにも影響するためベンチマークを動かすたびに結果が違うかとは思うので参考程度にしてください。 価格比較 まずは価格比較。 比較はVPSとクラウドの契約上の数値を合わせるものとする。実際には同一スペックに合わせるプランがないため近似値とし、クラウドをより上位にする。比較VPSプランは現在契約しているVPS 2G。 VPS クラウド CPU 3コア 3コア

MySQL Performance Blogの翻訳。Perconaのサポートエンジニアである筆者が、InnoDBのパフォーマンスチューニングの基礎について、ハードウェアやOSの選定からパラメータの推奨値まで解説する。 最近、2007年にPeter Zaitevが書いた「InnoDBパフォーマンス最適化の基礎」という記事を見つけた。これは素晴らしい記事で、読んでいると、MySQLとPercona Serversそして今日利用可能な全ての基盤技術に関して、6年近くの間に何が変わってきたのかを見直してみたいと思わせるものだ。 本当にたくさんのことが変わったものだ！この記事では、InnoDBの使用に効果的なパラメータの多くに、特にパフォーマンスの観点から焦点を当てる。私はサポートエンジニアで、Percona SupportではInnoDBパラメータの適切なサイズに関する質問がたくさん寄せられている

Scalable, elastic private cloud IaaS solution. Key Technologies: vSphere  |  vSAN  |  NSX  |  Aria