ヨドバシカメラのもうひとつの失敗 - なぷさく参照：ヨドバシドットコムのリニューアル失敗から学ぶべきたったひとつのこと大規模なサイトとなるとフル機能のシステムを事前にテストするのは難しい。確かに、スクリプトキディ御用達のDoSツールと化したabとか、微妙に重いJMeterとかをちょろっと回せばそれなりの単体テストはできるし、東陽テクニカに頭下げてavalanche借りてくれば、猛り狂った軍馬のごときパワーを誇る QuadCoreXeonサーバ数十台を完膚なきまでに沈黙させ、泣きべそをかいてお漏らししてリブートしちゃうような負荷テストもわりと簡単にできる。でもいくらテストをしても洗い出せず、実際にサービスインして初めてわかる問題もある。例えば、特定条件でパフォーマンスが低下するといった場合の切り分けは非常に難しい。バグだろ？って問い詰めても仕様です、って返ってきたり。GCのタイミングがどうのとかセマフォが何たらとかいわれても知るかと。*
