Пятница, 19:40, сайт лежит — не физически, а хуже: браузер каждому посетителю показывает красный экран «Ваше подключение не защищено». Сертификат Let's Encrypt, который «сам продлевается уже два года», внезапно истёк. Дежурного нет, ответственный инженер уже за городом без ноутбука, а в логах certbot тишина — точнее, там всё написано, просто три месяца никто туда не заглядывал. Это обобщённая, но очень типичная хроника инцидента: почему автопродление ломается незаметно, как это обнаруживают (обычно не мониторингом), что делать экстренно и как сделать…
Подробнее →