Fusion-IO ioDriveの障害例と調査方法 | 外道父の匠

インフラエンジニアに永遠につきまとう、月曜出社直後の障害報告と調査依頼。 今回はioDrive搭載サーバのMySQLが急に落ちましたということで、調査してみました。 これまで、ioDriveは不滅です。的なことばかり書いていましたが、まぁいつかは何か起きますよね・・・ってことで、ホクホクしながらioDriveのネガキャン、ではなく、こんな障害例がありましたよ、こんな感じで調べましたよという紹介をします。 月曜朝のスタート地点 依頼主からもらった情報。 あるioDrive搭載サーバのMySQLが急に落ちました 障害時間は 2012/09/29 03:30 です ioDriveのマウント先 /fio が利用できない状態です もうこのサーバは使っていないので好きに調査してください 今回は無償で受けてあげました。 それでは調査開始！ ドライバなどのバージョン確認 2.2.3 を利用していることを確

[GedowFather]

週明けによくあるある

[ya--mada]

ioDrive の構成とか<q>Fusion-IO社の調査では fio-bugreport の結果を必要とするため、あらかじめ取得しておくと早い…危ないため、ひと通り他の調査を済ませてから実行するのが無難</q>

[Akaza]

"Fusion-IO社の調査では fio-bugreport の結果を必要とするため、あらかじめ取得しておくと早い…危ないため、ひと通り他の調査を済ませてから実行するのが無難"

[masa_matya]

ストレージの一個が逝ったらDBが落ちた。ioDriveでも壊れることはある。

[htgc]

メモ

[hagyroom]

[調査方法]

[kimutansk]

出くわさない限り実際にやりませんからね。これはこれで貴重な情報です。

[sh2]

「fct1 FAILED as 'fiob' (block device)」を確認し、サーバを落としてもいい覚悟ができたらfio-bugreportを実行してサポートへ報告

[hiroyukim]

すばらしす

[todesking]

ふむー

[oopsops]

まさにこんな感じ "ioDriveは運用を始めてから、ほんとに全然問題が起きなく、珍しいので記録しておきました"