昨日XenのDomainUのひとつがいつの間にかRead-onlyになっていた。 とりあえずログを見ても原因がわからない。何らかのI/O負荷に伴うものだろうか。 muninのグラフを見ると障害の直前までに徐々に負荷が高まっている様子が確認できたので、なんとなく状況は把握。 この負荷が高まった原因については分かっているけど、すぐに対応できるものではないのでこちらはタスクに放り込んでスルーしておく。 止まっても緊急性のないサーバなのでのんびりと復旧を開始した。 ひとまず再起動 しょっぱなから適当に最強の回復魔法を試してみたのだが撃沈。 どうもブートの途中でひっかかってしまって起動しなくなった。 起動時にfsckが走ることを期待したのだが、そこまでも行かないっぽい。 しかしながらXenのconsoleから確認するとディスクをマウントするところで止まっているっぽいので、やはりまずはfsckをかけた