Действующий сайт или API не работают или настолько ухудшены, что клиенты не могут их использовать.
Одна бесплатная сессия на клиента: первые 4 часа со специалистом плюс ИИ без ограничений как инструмент.
Реальный старший специалист ведёт. Имя — в первом ответе. ИИ — инструмент; человек проверяет результат.
01
Как выглядит эта проблема, как это понять и что будет, если оставить как есть.
Как выглядит сбой на производстве, почему каждая минута кажется публичной и почему посреди шума полезен спокойный специалист.
Проверка работоспособности не удалась. В балансировщике нагрузки нет ничего здорового. Развертывание пошло не так. Сертификат, диск, база данных, изменение DNS или зависимость унесли с собой службу. Страницы статуса уже загораются.
Каждая минута кажется публичной. Вас просят указать расчетное время прибытия, которого у вас нет. Команда находится на совещании и все еще спорит о первом шаге.
Uptime — это обещание, которое вы уже дали своим пользователям, даже если оно никогда не было записано. Когда производство падает, это обещание уже нарушено. Задача состоит в том, чтобы восстановить его честно.
Вы хотите вернуть его по какой-то причине, а не перезагрузку, которая снова потерпит неудачу через час.
Когда производство не работает, работающий сайт или API отключены или настолько ухудшены, что клиенты не могут их использовать. Вы хотите вернуть его по причине, а не перезагрузке, которая снова потерпит неудачу через час.
Развертывание, сертификат, диск, база данных, изменение DNS или зависимость могут взять с собой службу. Страницы состояния загораются. Команда уже на связи и все еще спорит о первом шаге.
Работа выходного дня — это отдельный продукт; Любая дополнительная плата указывается заранее, перед звонком. Мы не принимаем каждый запрос на поддержку. Берем сложную систему, которой нужен инженер.
Это сигналы о том, что у вас сбой, даже если один регион или один путь все еще работает.
Экземпляры терпят неудачу или запускаются и завершаются в цикле.
Домашняя маркетинговая страница может все еще находиться в CDN, пока приложение не работает.
5xx, тайм-ауты или отказ в соединении для нескольких пользователей.
Некоторые узлы переехали, или миграция находится в середине пути, и никто не хочет ее трогать.
DNS, база данных, очередь или партнерский API — это настоящий сбой.
Перезагрузка не была причиной, только пауза.
До — если оставить как есть
Пока он не работает, вы теряете продажи, доверие и время людей, которые запомнят молчание больше, чем последующие объяснения.
После — если мы закроем это
Обслуживание восстановлено, непосредственная причина известна, а небезопасное решение (если оно необходимо) записано, чтобы его можно было заменить.
Узнаёте ситуацию? Напишите нам — разберём.
02
Откуда это обычно берётся, почему появляется в быстрой или ИИ-работе, и как проверить самому.
Большинство сбоев связаны с последним изменением, насыщением ресурса или зависимостью. Выясняем, какой из них является работой.
Флаг, секрет, сертификат или образ контейнера, который не работает только в реальном масштабе.
Подключения, блокировки, полный том или миграция, которая не завершится.
Запись, сертификат или правило балансировки нагрузки, которые больше не указывают на исправное происхождение.
Облачный лимит, оплата счета или сторонний сбой без таймаута.
Атака, всплеск трафика или процесс, завершившийся после развертывания.
Сгенерированный конвейер или контейнер «работает на моей машине» часто впервые встречается с рабочей версией в день запуска. Быстрые стартапы также пропускают Runbook, поэтому первый сбой — это также первая репетиция.
Инцидент Human First по-прежнему начинается с последнего изменения и журналов, а не с обнадеживающего сценария перезапуска, написанного моделью в середине разговора.
Собирайте улики по ходу дела. Перезагрузка может помочь, а также стереть нужную вам картинку.
Какие URL, какие регионы, какие пользователи и является ли он полным или деградированным.
Развертывание, DNS, сертификат, изменение облака или задание. Запишите время.
Один из них зачастую уже говорит правду.
Известный последний хороший артефакт — это подарок, если данные позволяют это.
Порча, выкуп или неожиданный админ. Это меняет порядок работы. См. также страницу взломанного сайта.
Узнаёте ситуацию? Напишите нам — разберём.
03
Ведёт опытный специалист. ИИ — инструмент. Человек проверяет результат.
Отключения хаотичны. Спокойный специалист, увидевший такую форму неудачи, полезен именно тем, что вы находитесь в ее центре.
DevHero — человек прежде всего. Вы пишите, видите имя специалиста, и этого человека можно оповестить и позвонить. ИИ может помочь нам сканировать журналы. Человек руководит восстановлением и проверяет исправление. Мы не принимаем каждый запрос на поддержку. Мы берем жесткую систему, для которой нужен инженер, а не сценарий справочного центра.
Пишешь, видишь имя, и этого человека можно оповестить и позвонить. ИИ может помочь нам сканировать журналы. Человек руководит восстановлением и проверяет исправление.
How a typical weekday case moves
Пишите в WhatsApp или Telegram прямо сейчас. Если вам нужно быть первым в очереди, спросите о срочном переходе на позицию 1. Работа выходного дня — это отдельный продукт, любая доплата оговаривается заранее.
Время, URL-адреса, последнее развертывание и откат ли вы.
Через минуту вы увидите их имя. Им можно позвонить, если они не ответят.
Программа долгосрочной надежности — это сложный проект.
Мы присоединяемся к инциденту, восстанавливаем безопасный путь к жизни, а затем рассказываем вам, что еще нуждается в долговременном исправлении. Человек проверяет восстановление.
Мы присоединяемся к инциденту, смотрим на последнее изменение, зависимости, журналы и работоспособность данных, а затем восстанавливаем безопасный путь для жизни. После того, как все будет готово, мы расскажем вам, что еще нуждается в долговременном исправлении. Программа долгосрочной надежности — это сложный проект. Работа выходного дня — это отдельный продукт; Любая дополнительная плата указывается заранее, перед звонком.
Последнее изменение, область применения и то, что уже было опробовано.
Откат, аварийное переключение или сдерживание, которое возвращает задание пользователя, если это безопасно.
Журналы, работоспособность, диск, зависимости — не уничтожая единственную копию следа, если мы можем этого избежать.
Некоторые причины требуют дальнейшего рассмотрения. Мы не будем притворяться, что перезагрузка — это анализ первопричин.
Значит его можно заменить.
Первая цель — восстановить безопасный путь. 24-часовая цель в типичном будничном случае — это причина и контролируемое выздоровление.
Специалист по данному происшествию будет назван, как только вы будете на сеансе.
Обслуживание восстановлено или четкое сдерживание, если это возможно с имеющимся у нас доступом.
Причина, или суженный набор причин, простым языком.
Примечание о любом обходном пути, который не должен оставаться.
Восстановление, проверенное человеком, и последующие действия, если работа по обеспечению надежности сохраняется.
Скорость имеет значение. Несколько фактов предотвращают слепой перезапуск. Не вставляйте живые пароли в чат.
Плюс часовой пояс.
Ошибки, пустые страницы, сбои входа в систему, сбой платежей.
Развертывание, DNS, сертификат или облачное событие.
Перезапуск, откат, увеличение масштаба или неудачное переключение при сбое.
Согласованный канал и авторизованный доступ.
Первые 4 часа со специалистом + ИИ без ограничений: бесплатно, один раз на клиента. Дальнейшая работа платная, по запросу. Человек ведёт работу и проверяет результат.
Бесплатно (первая сессия)
Большая работа идёт по другому тарифу, по запросу. Мы говорим об этом до того, как продолжить.
По запросу
Базовый план — только будни. Работа в выходные — отдельный продукт. Любая надбавка называется заранее, до звонка, и зависит от сложности. Сумма: по запросу.
По запросу
Первая сессия бесплатна: первые 4 часа со специалистом плюс ИИ без ограничений, один раз на клиента. Работа сверх этого, тариф сложных проектов и тариф выходных — платные, по запросу.
Одна бесплатная сессия на клиента: первые 4 часа со специалистом плюс ИИ без ограничений как инструмент.
Узнаёте ситуацию? Напишите нам — разберём.
04
Чего не делать дальше, какие стеки мы видим в такой работе и как удержать исправление.
Движение — это не то же самое, что восстановление. Некоторые ходы усложняют следующий час.
Вы можете на короткое время выздороветь и потерять дело.
Ты можешь потерять последний хороший артефакт.
Сначала восстанови, потом пиши.
Вы можете ошибаться и можете указать путь, который вы не закрыли, если это тоже событие безопасности.
Если сайт был поврежден или произошла утечка данных, просмотрите взломанный сайт и страницы безопасности и скажите об этом заранее.
Расскажите нам стек и хост. Если не стоит брать, мы так и скажем.
AWS, GCP, Azure и более простые хосты.
Postgres, MySQL, Redis и рабочие места.
Край, который может выглядеть как сбой приложения.
Изменение CI/CD, которое привело к сбою. См. также неудачные развертывания.
Восстановление считается неполным, если тот же самый ход приведет вас к поражению завтра.
Причина, обходной путь и окончательное решение.
Откат, который вы никогда не пробовали, — это надежда.
Не только на статической странице.
Скучные проверки.
Когда сможешь.
Имя и путь, а не групповой чат с пятьюдесятью людьми.
Конвейер, который вы не понимаете, выйдет из строя публично.
Узнаёте ситуацию? Напишите нам — разберём.
05
Прямые ответы об этой проблеме, сессии и том, что будет дальше.
Если у вас есть известный последний удачный выпуск и безопасный откат, скажите, что вы уже пробовали.
Скажи это. Будем относиться к этому с таким порядком работы. См. также страницы взломанного сайта и дыры в безопасности.
Да. Спросите о срочном переходе на позицию 1. Стартовая цена 99 долларов США, пока очередь пуста, позже ее можно будет пересмотреть.
Пишите в WhatsApp или Telegram прямо сейчас. Ни формы, ни веб-чата.
Нет. Базовый план — будние дни. Работа в выходные дни — это отдельный продукт, и любые доплаты оговариваются заранее, перед звонком.
Нет. Мы поговорим об этом инциденте и о том, что мы изменили.
Если вам нужен контроль надежности, мы предлагаем соответствующую ставку и подписываемся на эту работу.
Нет, если задание пользователя не работает. Медицинские осмотры могут быть ошибочными.
Нет. Мы берем жестко отключенную систему, для которой нужен инженер, а не скрипт справочного центра.
Да. У каждого клиента одна бесплатная сессия: первые 4 часа со специалистом плюс ИИ без ограничений как инструмент. Линия «24 часа» — это срок, за который мы стремимся начать и закрыть типичный будний случай в рамках объёма, а не 24 часа неоплачиваемой работы. Дальнейшая работа платная, по запросу.
Если производство уже приостановлено, напишите в WhatsApp или Telegram прямо сейчас. Вы поговорите с человеком.
Одна бесплатная сессия на клиента: первые 4 часа со специалистом плюс ИИ без ограничений как инструмент.