Getting the most out of your NVMe SSD
Getting the most out of your NVMe SSD Charles Rose Lakshmi Narayanan Durairajan Red Hat Summit June 2015 2 Agenda • NVMe – A Brief Introduction – What is NVMe – Why NVMe • Overview of NVMe Components • NVMe SSD vs. SAS SSD • NVMe Usage Scenarios and Performance – File Systems on NVMe – dm-cache – Mariadb NVMe – A Brief Introduction 4 NVMe (Non-Volatile Memory Express) • A specification for accessi
LinuxのSSD設定 - Qiita
概要 SSDで寿命とかパフォーマンスを改善するために設定しておいた方が良い点のまとめです。 よくある系のネタですが、久しぶりにSSD設定見なおしたら勘違いしてた点がいくつかあったので備忘を兼ねて残します。目次見て「こんなの常識だよね」って思った方はスルーしてくださいm(_ _)m 基本 firmwareを最新化する kernel/osはなるべく新しいものを使う 新しいファイルシステムを使う(多分今のところext4が一番良さそう) swapしないようメモリを沢山積む TRIMを使う TRIMとは SSD上のデータは削除しても削除マークが付くだけで削除されません。 この状態のブロックにデータを書き込む場合、一度完全に消去してから書き込みます。 TRIMコマンドはOS上のファイルが不要になったことをSSDに伝えて明示的にデータの消去を行うコマンドです。 メリット TRIMを使わない場合、以前デー
UbuntuのSSDをより高速化させる - ゴミ箱の中のメモ帳
皆さん、trimしてますか？ 現在SSDを使われている方は、HDDからSSDに変更し、その速度の違いからHDDには戻れないという方が多いかと思います。ですが、その快適なSSDにも幾つかの罠があります。 壊れたら直せない 書き換え寿命がある プチフリがある 容量単価が高い HDDに戻れない 致命的な順に私が思うSSDの欠点はこのようなものになります。HDDはシークヘッドが壊れたとしても、制御基板が壊れたとしても、プラッタの一部が壊れたとしても専門の業者はクリーンルームで部品交換を行うことができるようですが、SSDは壊れたら基本的に修理することができません。壊れたら終わりです。HDDなら異音から故障時期を察する能力も得を積めば会得可能ですが、SSDは無音のためこの得を積むことができません。 SSDは可動部品が無いためHDDに比べると故障確率は少ないのですが、HDDに比べると書き換え寿命があり、
EXT4 vs XFS vs Btrfs vs ZFSをfioでベンチマークを取ってみました。 - Qiita
概要 CentOS7のデフォルトのファイルシステムがXFSとなりました。 mkfsコマンドでも、minix, xfs, btrfsが使えるようになりました。 そこで気になるファイルシステムを色々調べ、ベンチマークを自分なり取ってみました。 多少なりともご参考になればと思います。 色々なファイルシステム こちらをご参考ください。 http://qiita.com/sion_cojp/items/c8e015db39ddbf43012e それぞれファイルシステムを作ってみる 今回の環境は CentOS6（ホスト） 4Core, MEM:32G, HDD:300G CentOS7（ゲスト。こちらで計測しております。） vCPU *1, MEM:4G, HDD:40G 容量が少なかったため、btrfsのベンチマークが終わった後、zfsにファイルシステムを変更し検証をしております。 ### zfsの
SSDの寿命をext4ファイルシステムの統計情報から推定する
SSDを選定する場合には書き込み量の推定が重要です。 NAND Flashの各ブロックに書き換え回数の上限があるSSDでは書き込み総量に制限が存在します。 NAND Flash自体の書き換え回数上限は実装にどのような技術が使われているかにもよりますが数千回から10万回程度。HDDやRAMDISKではこの回数上限は事実上存在しません。 そのためSSDではファームウェアで各ブロックが均等に書き換えられるように工夫したり、外部に見せるより多い容量のNAND Flashを用意してブロックあたりの書き換え回数を減らしたり、不良ブロック発生時にもただちに影響がないようにしています。 このため、コンシューマ向けでは記載がないものもありますが、エンタープライズ向けSSDでは必ず総書き込み上限について記載があります。 適当にぐぐったIntelのSSD仕様の例: http://ark.intel.com/ja
Riak 05 システムプランニング | Ore no homepage
ハードウェア層 OS層 クラスタの留意点 負荷分散 ベンチマーク BitcaskとLevelDB コンフィグファイル スケールアウトとスケールアップの手順 運用上の注意点 64ビットCPUアーキテクチャ 最低4GBのメモリ。メモリは最も重要。局所性を活かせるのであれば多くメモリを必要としない。 RAID0、SSDを考慮すると良い。IOバウンドになりがちなので。 ミラーリング(RAID1)は考えなくて良い。 RAID(RAID1？)はやめちゃいな(クラスタ組んでるしいいんじゃない？的な？)。 ディスクサイズ重要。 ギガビットイーサも考慮にいれて。ネットワークも使うよ。 仮想マシンを使う場合は一番良いインスタンスを使う。同じデータセンタ/リージョンに配置するようにする。 クラスタ全体で必要なディスクサイズは次のように計算できる。 オブジェクト数 * 平均オブジェクトサイズ * n_val 50
Linuxエンジニア日記 ext4について
Linux関連トピック中心のブログにするつもりでしたが 気付いたらあんまりLinux関連の記事をUPしてませんでした。。 なので今日は珍しくLinuxの話題を一つ。 karnel 2.6.19からリリースされているext4ですが、 世間一般にはあまり浸透してないようですね。 (ext4が既にリリースされている事を知っている人自体私の周りでもあまりいませんでした。。) かくいう私も一度だけ話題作りの検証をしてみただけです。 検証したのが結構前で情報も乏しかったので今回は とりあえずext4の特徴について纏めてみたいと思います。 まず初めにですが、ext4は今も開発中ですので機能リストは常に流動的です。 正確に把握しておきたいのであればsourceを読むかkarnel watchしておいて下さい。 今回は現時点の最新stable版2.6.28を中心に特徴を纏めます。 1. 16TB越ファイルシ
ext4なファイルシステム環境を使う際の注意点 - Shaw's Home Page（本館）
つい先日こんな日記を書いた。 サーバのHDD 原因はディスクI/Oだ！という結論は決して間違っていなかったんだけど、根本的なことを理解していなかったばっかりに、この日記を書いたあとも多いにはまりましたよ…という話。 そもそも今回の件って、さくらインターネットの専用サーバを新規に借りて、そこにRHEL6をのっけたところがスタートだったわけです。で、サーバが利用できるようになってから、サイトのセットアップを済ませ、いざ運用テストを行ってみた段階で、DBに対する書き込みのパフォーマンスが全然あがらない。なのでHDDの障害を疑って、そして再セットアップまで行ってもらったというのが前回の話。 ただ、再セットアップしてもらった環境で、改めてベンチマークとってスループットチェックを行っても、全然パフォーマンスが変わらないわけです。ベンチマークに利用したdbenchの傾向として、Flash項目だけずばぬけ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Cloudera Hybrid Data Community
ext3からext4への更新概要
EXT4 in action « Helion-Prime Solutions blog
Ric Wheeler Architect and Manager, Red Hat May 5, 2011 ONE BILLION FILES: Pushing Scalability Limits of Linux File Systems Overview ● Why Worry about 1 Billion Files? ● Storage Building Blocks ● Things File Systems Do & Performance ● File System
What's the fastest filesystem for developer builds?