Суть. Инцидент — событие с влиянием на клиента. Управление им состоит из двух частей: роли и порядок во время сбоя, и разбор после. Разбор ведётся без поиска виноватых — не из вежливости, а потому что при поиске виноватых люди перестают рассказывать, как было на самом деле, и разбор теряет смысл.
Роли во время инцидента
| Роль | Задача |
|---|---|
| Ведущий | Координирует, принимает решения, не чинит сам |
| Исполнители | Диагностируют и устраняют |
| Связь | Сообщает клиентам и внутрь, снимает нагрузку с ведущего |
| Летописец | Фиксирует время и действия для будущего разбора |
Что в разборе
- Хронология по минутам: когда началось, когда заметили, когда поняли, когда починили
- Влияние: сколько клиентов и как долго
- Условия: что должно было сработать и не сработало — мониторинг, проверка, откат
- Действия с владельцами и сроками, а не список пожеланий
Разрыв между «началось» и «заметили» обычно самая ценная цифра: он говорит о качестве наблюдаемости больше, чем любой отчёт.
Из чего состоит рабочий разбор
| Раздел | Что в нём | Признак халтуры |
|---|---|---|
| Хронология | Минута за минутой: что произошло, кто что увидел | «Около полудня возникла проблема» |
| Влияние | Сколько клиентов, какие операции, какие деньги | Влияние описано словом «незначительное» |
| Что помогло | Как обнаружили и как остановили | Раздела нет вовсе |
| Условия | Что сделало сбой возможным | Одна строка: «человеческий фактор» |
| Действия | Конкретные задачи с владельцем и сроком | «Усилить контроль» |
Почему без поиска виноватых
Это не про мягкость. Как только за разбор наказывают, инженеры перестают рассказывать детали — а именно детали и есть материал для выводов. Организация меняет доступ к правде на возможность кого-то наказать, и следующий сбой проходит уже вслепую.
- Обсуждается система, а не человек: не «почему он нажал», а «почему система позволила нажать без предупреждения».
- Ведёт разбор тот, кто не участвовал в устранении.
- Действия попадают в тот же список задач, что и остальная работа, иначе не делаются.
- Документ открыт внутри компании. Закрытый разбор не учит никого, кроме авторов.
Где ломается
Причиной называют человека. «Инженер выкатил не ту версию» — не причина, а последнее звено. Причина в том, что выкатить не ту версию было возможно.
Действия без владельца. Через месяц ни одно не выполнено, и следующий инцидент повторяет предыдущий.
Разбирают только крупные сбои. Мелкие повторяющиеся дают больше информации, потому что показывают системную слабость.
Разбор превращается в отчёт руководству. Формулировки сглаживают, причины обобщают, действия делают безопасными. Пользы ноль, время потрачено.
Действия не выполняются. Через полгода тот же сбой, тот же разбор, те же незакрытые задачи из прошлого. Это самая частая картина.
Разбирают только крупные сбои. Мелкие повторяющиеся инциденты суммарно стоят дороже, но никто не считает.
Один показатель говорит о зрелости больше отчётов: доля действий из прошлых разборов, закрытых в срок. Ниже половины — практика существует на бумаге.
Частые вопросы
Связанное
Разбор стоит ровно столько, сколько стоят выполненные после него действия. Всё остальное — документ.