Инцидент · средне

Очередь встала

Поддержка пересылает жалобы: заказы, оформленные утром, так и висят в статусе new, а свежие уходят в доставку за секунды. Утром воркер обработки заказов переезжал на новую машину. Протолкни застрявшие заказы, ничего не потеряв и не отгрузив дважды.

Наблюдается

redis-cli hget order:1001 status → new; заказы, оформленные только что, получают статус shipped

Сложность
средне
Проверки
5 проверок
Сессия
до 60 минут
Подсказки
нет

Как проходит инцидент

  1. Сервер уже сломан

    Песочница — настоящий Linux с root-доступом, сломанный ровно так, как в легенде. Ничего не нужно ставить.

  2. Расследуй

    Логи, процессы, конфиги, сеть — как на дежурстве. Подсказок нет: только легенда и симптом.

  3. Почини и проверь

    Проверки скажут, что ещё не так с системой, но не скажут почему. Инцидент закрыт, когда проходят все.

  4. Сдался — разбор

    Можно сдаться: откроется разбор корневой причины, а инцидент вернётся через сутки, с чистого состояния.

Что тренирует

  • искать причину, а не латать симптом
  • читать логи и журналы служб
  • разбираться в процессах, портах и конфигах
  • проверять, что починка ничего не сломала рядом