月曜の朝、監視が鳴った。対象は小さなWordPressサーバ。`/var` が99%で、管理画面も重い。
瀬名は反射的に古いログを消そうとしたが、律が止めた。
「先に何が増えたか見ましょう。消すのは最後」
`du -xhd1 /var`、`journalctl –disk-usage`、`find /var/log -type f -size +100M`。原因は失敗したバッチが同じエラーを毎秒吐き続けた巨大ログだった。二人はサービスを止め、ログを退避し、logrotateの設定に `maxsize` を追加した。
復旧後、律が缶コーヒーを差し出す。
「勢いで消さない人、嫌いじゃないです」
瀬名は礼を言いそびれた。アラートより、その一言のほうが心拍を上げていた。
人物紹介
瀬名悠真
- 男性、30代
- サーバ運用・インフラ担当
- 手は動くが、初動で少し焦りやすい
久坂律
- 女性、30代
- 監視、自動化、ログ解析、運用設計に強い
- 冷静で、原因調査の順序を大事にする
