Инциденты · Продвинутая
Провести учение по отказоустойчивости
Проверить гипотезы о восстановлении через контролируемый отказ компонента.
Быстро понять за 2 минуты
Проверить гипотезы о восстановлении через контролируемый отказ компонента. Результат работы — Game Day Report.
Контекст
Урок относится к этапу «Инциденты». Снижать влияние сбоев, быстро восстанавливать сервис и устранять системные причины. Задачу выполняют до реализации или согласования зависимого решения, чтобы команда опиралась на проверенные факты и однозначные договоренности.
Что это дает
Правильно выполненная работа снижает стоимость переделок, делает решение проверяемым и дает участникам единый источник информации. Практический результат фиксируется в артефакте «Game Day Report».
Как выполнить
- Выберите безопасный failure scenario
- Определите abort conditions
- Проведите эксперимент и review
Критерии приемки
- Blast radius ограничен
- Наблюдаемость увидела сбой
- Пробелы превратились в задачи
Типичные ошибки
- Ломать production без guardrails
- Считать отсутствие сбоя успехом
Инструменты
Рабочий артефакт
Рабочий артефакт
Game Day Report
На рабочем проекте специалист начинает с шага «Выберите безопасный failure scenario», фиксирует выводы в артефакте «Game Day Report» и передает его владельцам решения. Пункт закрывается после проверки: «Blast radius ограничен».
- MTTD
- MTTA
- MTTR
- Actions
Контроль качества
Incident Review
Blast radius ограничен
После релизов, изменения требований, обновления целей и появления новых рисков.
Контекст, проблему, доказательство, владельца, срок и критерий приемки.
Перед отметкой выполнено: Blast radius ограничен
Как применять
Начинайте с влияния на пользователя, продукт и команду. Затем проверьте реализуемость, критерии качества и формат доказательства результата. Хороший пункт чеклиста объясняет, какую проблему закрываем, как выполняем работу и по каким признакам считаем ее завершенной.
Режим обучения
Тест по теме
Проверка понимания
Ответьте на вопросы по материалу и получите итоговый отчет: что понято хорошо, а что стоит перечитать.