Активний сайт або API не працює або настільки погіршився, що клієнти не можуть ним користуватися.
Одна безкоштовна сесія на клієнта: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент.
Реальний старший спеціаліст веде. Ім’я — в першій відповіді. ШІ — інструмент; людина перевіряє результат.
01
Як виглядає ця проблема, як це зрозуміти і що буде, якщо залишити як є.
Як виглядає збій у виробництві, чому кожна хвилина є публічною та чому спокійний спеціаліст корисний серед галасу.
Перевірки справності не вдаються. За балансувальником навантаження немає нічого здорового. Розгортання пішло не так. Сертифікат, диск, база даних, зміна DNS або залежність взяли службу з собою. Сторінки статусу вже підсвічуються.
Кожна хвилина стає публічною. Вас запитують ETA, якого у вас немає. Команда спілкується і все ще сперечається про перший крок.
Безвідмовна робота — це обіцянка, яку ви вже дали своїм користувачам, навіть якщо вона ніколи не була записана. Коли виробництво падає, ця обіцянка вже порушена. Робота полягає в тому, щоб його чесно відновити.
Ви хочете його повернути, з причиною, а не перезавантаженням, яке знову вийде з ладу через годину.
Коли виробництво не працює, активний сайт або API перебувають у автономному режимі або настільки погіршилися, що клієнти не можуть ними користуватися. Ви хочете повернути його з причиною, а не перезавантаженням, яке знову вийде з ладу через годину.
Розгортання, сертифікат, диск, база даних, зміна DNS або залежність можуть взяти службу з собою. Світяться сторінки стану. Команда вже на виклику і все ще сперечається про перший крок.
Робота у вихідні - окремий продукт; будь-яка доплата вказується заздалегідь, перед дзвінком. Ми не приймаємо всі запити на підтримку. Ми приймаємо жорстку систему, яка потребує інженера.
Це сигнали про те, що у вас збій, навіть якщо один регіон або один шлях все ще працюють.
Примірники виходять з ладу, або запускаються та вмирають у циклі.
Маркетингова домашня сторінка все ще може бути на CDN, поки додаток не працює.
5xx, тайм-аут або відмова у з’єднанні для кількох користувачів.
Деякі вузли переміщено, або міграція на середині, і ніхто не хоче її торкатися.
DNS, база даних, черга або партнерський API є справжнім збоєм.
Перезавантаження не було причиною, а лише паузою.
До — якщо залишити як є
Поки він не працює, ви втрачаєте продажі, довіру та час від людей, які запам’ятають тишу більше, ніж подальше пояснення.
Після — якщо ми це закриємо
Сервіс відновлено, безпосередня причина відома, а небезпечний обхідний шлях — якщо він був потрібний — записаний, щоб його можна було замінити.
Впізнаєте ситуацію? Напишіть нам — розберемо.
02
Звідки це зазвичай береться, чому з’являється в швидкій чи ШІ-роботі, і як перевірити самостійно.
Більшість збоїв мають останню зміну, насичений ресурс або залежність. Знайти, який з них є роботою.
Прапор, секрет, сертифікат або зображення контейнера, яке не працює лише в реальному масштабі.
Підключення, блокування, повний том або міграція, яка не завершиться.
Запис, сертифікат або правило балансування навантаження, яке більше не вказує на справне походження.
Хмарний ліміт, оплата рахунку або збій третьої сторони без тайм-ауту.
Атака, стрибок трафіку або процес, який зник після розгортання.
Згенерований конвеєр або контейнер «працює на моїй машині» часто вперше зустрічаються у виробництві в день запуску. Швидкі стартапи також пропускають runbooks, тому перше відключення також є першою репетицією.
Інцидент Human First усе ще починається з останньої зміни та журналів, а не з обнадійливого сценарію перезапуску, написаного моделлю в середині виклику.
Збирайте докази на ходу. Перезавантаження може допомогти, а також стерти необхідне зображення.
Які URL-адреси, які регіони, які користувачі та чи це повне чи погіршене.
Розгортання, DNS, сертифікат, зміна хмари або робота. Запишіть час.
Один із них часто вже говорить правду.
Відомий останній гарний артефакт є подарунком, якщо це дозволяють дані.
Пошкодження, викуп або неочікуваний адмін. Це змінює порядок роботи. Перегляньте також сторінку зламаного сайту.
Впізнаєте ситуацію? Напишіть нам — розберемо.
03
Веде досвідчений спеціаліст. ШІ — інструмент. Людина перевіряє результат.
Відключення хаотичні. Спокійний фахівець, який побачив цю форму невдачі, корисний саме тому, що ви перебуваєте в її центрі.
DevHero перш за все людина. Пишеш, бачиш фахівця, і цю людину можна попередити, зателефонувати. AI може допомогти нам сканувати журнали. Людина керує відновленням і перевіряє виправлення. Ми не приймаємо всі запити на підтримку. Ми беремо жорстку систему, яка потребує інженера, а не сценарію довідкового центру.
Ви пишете, ви бачите ім’я, і цю людину можна попередити та зателефонувати. AI може допомогти нам сканувати журнали. Людина керує відновленням і перевіряє виправлення.
How a typical weekday case moves
Напишіть зараз у WhatsApp або Telegram. Якщо потрібно бути першим у черзі, запитайте про терміновий перехід на 1 позицію. Робота у вихідні – окремий товар, будь-яка доплата вказана наперед.
Час, URL-адреси, останнє розгортання та те, чи ви відкочувалися.
За хвилину ви побачите їх ім'я. Їх можна викликати, якщо вони не відповідають.
Довша програма надійності – це складний проект.
Ми приєднуємося до інциденту, відновлюємо безпечний шлях до життя, а потім розповідаємо вам, що ще потребує остаточного виправлення. Людина перевіряє відновлення.
Ми приєднуємося до інциденту, переглядаємо останню зміну, залежності, журнали та стан даних, а потім відновлюємо безпечний шлях до життя. Після того, як він буде готовий, ми розповімо вам, що ще потребує остаточного виправлення. Довша програма надійності – це складний проект. Робота у вихідні – окремий продукт; будь-яка доплата вказується заздалегідь, перед дзвінком.
Остання зміна, обсяг і те, що вже випробувано.
Відкат, відновлення після відмови або обмеження, яке повертає завдання користувача назад, якщо це безпечно.
Журнали, здоров’я, диск, залежності — без знищення єдиної копії сліду, якщо ми можемо цього уникнути.
Деякі причини потребують подальшого розгляду. Ми не будемо вдавати, що перезавантаження є аналізом першопричини.
Так можна замінити.
Перша мета — відновити безпечний шлях. 24-годинна ціль, у типовому випадку буднього дня, є причиною та перевіреним відновленням.
Спеціаліст з інциденту, названий, коли ви на сеансі.
Обслуговування відновлено або чітке обмеження, якщо це можливо з доступом, який ми маємо.
Причина або звужений набір причин, якщо говорити простою мовою.
Примітка про будь-який обхідний шлях, який не повинен залишатися.
Відновлення, перевірене людиною, і подальше спостереження, якщо надійність залишається.
Швидкість має значення. Кілька фактів запобігають сліпому перезапуску. Не вставляйте активні паролі в чат.
Плюс часовий пояс.
Помилки, порожні сторінки, помилки входу, збій платежів.
Розгортання, DNS, сертифікат або хмарна подія.
Перезапуск, відкат, масштабування або невдале відновлення після відмови.
Узгоджений канал і авторизований доступ.
Перші 4 години зі спеціалістом + ШІ без обмежень: безкоштовно, один раз на клієнта. Подальша робота платна, за запитом. Людина веде роботу й перевіряє результат.
Безкоштовно (перша сесія)
Більша робота йде за іншим тарифом, за запитом. Ми кажемо про це, перш ніж продовжити.
За запитом
Базовий план — лише будні. Робота у вихідні — окремий продукт. Будь-яка надбавка називається заздалегідь, до дзвінка, і залежить від складності. Сума: за запитом.
За запитом
Перша сесія безкоштовна: перші 4 години зі спеціалістом плюс ШІ без обмежень, один раз на клієнта. Робота понад це, тариф складних проєктів і тариф вихідних — платні, за запитом.
Одна безкоштовна сесія на клієнта: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент.
Впізнаєте ситуацію? Напишіть нам — розберемо.
04
Чого не робити далі, які стеки ми бачимо в такій роботі і як утримати виправлення.
Рух — це не те саме, що відновлення. Деякі рухи ускладнюють наступну годину.
Ви можете ненадовго одужати і втратити справу.
Ви можете втратити останній гарний артефакт.
Спочатку віднови, а потім пиши.
Ви можете помилятися, і ви можете виявити шлях, який ви не закрили, якщо це також подія безпеки.
Якщо сайт зіпсовано або дані витікають, перегляньте зламаний веб-сайт і сторінки безпеки та скажіть про це заздалегідь.
Скажіть нам стек і хост. Якщо ми не повинні це брати, ми це скажемо.
AWS, GCP, Azure та простіші хости.
Postgres, MySQL, Redis і робочі завдання.
Край, який може виглядати як збій програми.
Зміна CI/CD, яка стала збоєм. Дивіться також невдалі розгортання.
Відновлення є неповним, якщо той самий рух знищить вас завтра.
Причина, обхідний шлях і остаточне вирішення.
Відкат, якого ви ніколи не пробували, - це надія.
Не лише на статичній сторінці.
Нудні перевірки.
Коли зможеш.
Ім'я та шлях, а не груповий чат із п'ятдесятьма людьми.
Трубопровід, якого ви не розумієте, зазнає збою публічно.
Впізнаєте ситуацію? Напишіть нам — розберемо.
05
Прямі відповіді про цю проблему, сесію і те, що буде далі.
Якщо у вас є відомий останній успішний випуск і безпечний відкат, скажіть, що ви вже пробували.
Скажи це. Таким порядком роботи ми будемо ставитися до цього. Перегляньте також сторінки на зламаному веб-сайті та про діри в безпеці.
Так. Запитайте про терміновий переїзд на позицію 1. Стартова ціна 99 USD, поки черга порожня, її можна переглянути пізніше.
Напишіть зараз у WhatsApp або Telegram. Ні форми, ні веб-чату.
Ні. Базовий план - робочі дні. Робота у вихідні – це окремий продукт, і будь-яка доплата вказується заздалегідь, перед дзвінком.
Ні. Ми поговоримо про цей інцидент і про те, що ми змінили.
Якщо ви хочете перевірити надійність, ми пропонуємо ставку відповідності та підписуємося на цю роботу.
Ні, якщо завдання користувача не працює. Перевірки стану здоров’я можуть виявити не те.
Ні. Ми беремо жорстку систему, для якої потрібен інженер, а не сценарій довідкового центру.
Так. Кожен клієнт має одну безкоштовну сесію: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент. Лінія «24 години» — це строк, за який ми прагнемо почати й закрити типовий буденний випадок у межах обсягу, а не 24 години неоплачуваної роботи. Подальша робота платна, за запитом.
Якщо виробництво вже зупинено, напишіть зараз у WhatsApp або Telegram. Ви будете говорити з людиною.
Одна безкоштовна сесія на клієнта: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент.