データベースのフルリカバリを実際に経験した話

摘要

実はこの原稿を書いている最中に、本番環境のデー夕べースが本当に壊れる障害が発生しました。今回の障害はストレージのファームウェアバグに起因する複雑な要因があるハードウェア障害で、データベースのデータ領域が完全に壊れてしまいました。そこでセオリ～どおりフルバックアップをリストア後、WALもリカバリして変更履歴を適用することでデータ消失なく完全にデータベースを復旧させることに成功しました。