DEVHERO Написати в WhatsApp
HelplineЖиві люди, не ШІ. Допомога протягом 24 годин
Human First
продакшен лежить

Продакшен лежить. Вирішимо за 24 години.

Активний сайт або API не працює або настільки погіршився, що клієнти не можуть ним користуватися.

  • Перевірки працездатності чи балансування навантаження не містять нічого справного
  • Клієнти не можуть увійти, оплатити або завантажити основну сторінку
  • Рівень помилок стрибає та залишається високим

Одна безкоштовна сесія на клієнта: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент.

Реальний старший спеціаліст веде. Ім’я — в першій відповіді. ШІ — інструмент; людина перевіряє результат.

01

Проблема

Як виглядає ця проблема, як це зрозуміти і що буде, якщо залишити як є.

Як виглядає ця проблема

Як виглядає збій у виробництві, чому кожна хвилина є публічною та чому спокійний спеціаліст корисний серед галасу.

Перевірки працездатності не вдаються, і користувачі не можуть завершити завдання

Перевірки справності не вдаються. За балансувальником навантаження немає нічого здорового. Розгортання пішло не так. Сертифікат, диск, база даних, зміна DNS або залежність взяли службу з собою. Сторінки статусу вже підсвічуються.

Вас запитують ETA, якого у вас немає

Кожна хвилина стає публічною. Вас запитують ETA, якого у вас немає. Команда спілкується і все ще сперечається про перший крок.

Безвідмовна робота – це обіцянка, яку ви вже дали

Безвідмовна робота — це обіцянка, яку ви вже дали своїм користувачам, навіть якщо вона ніколи не була записана. Коли виробництво падає, ця обіцянка вже порушена. Робота полягає в тому, щоб його чесно відновити.

Ви хочете його повернути, з причиною, а не перезавантаженням, яке знову вийде з ладу через годину.

Коли виробництво не працює, активний сайт або API перебувають у автономному режимі або настільки погіршилися, що клієнти не можуть ними користуватися. Ви хочете повернути його з причиною, а не перезавантаженням, яке знову вийде з ладу через годину.

Розгортання, сертифікат, диск, база даних, зміна DNS або залежність можуть взяти службу з собою. Світяться сторінки стану. Команда вже на виклику і все ще сперечається про перший крок.

Робота у вихідні - окремий продукт; будь-яка доплата вказується заздалегідь, перед дзвінком. Ми не приймаємо всі запити на підтримку. Ми приймаємо жорстку систему, яка потребує інженера.

Ознаки зниження виробництва, а не просто «трохи повільного»

Це сигнали про те, що у вас збій, навіть якщо один регіон або один шлях все ще працюють.

Перевірки працездатності чи балансування навантаження не містять нічого справного

Примірники виходять з ладу, або запускаються та вмирають у циклі.

Клієнти не можуть увійти, оплатити або завантажити основну сторінку

Маркетингова домашня сторінка все ще може бути на CDN, поки додаток не працює.

Рівень помилок стрибає та залишається високим

5xx, тайм-аут або відмова у з’єднанні для кількох користувачів.

Розгортання в невідомому стані

Деякі вузли переміщено, або міграція на середині, і ніхто не хоче її торкатися.

Залежність вимкнено, і ваш додаток не має резервного варіанту

DNS, база даних, черга або партнерський API є справжнім збоєм.

Ви вже один раз перезапустили, і він знову впав

Перезавантаження не було причиною, а лише паузою.

Якщо він не працює, і якщо він повертається з причиною

До — якщо залишити як є

Якщо залишити як є

Поки він не працює, ви втрачаєте продажі, довіру та час від людей, які запам’ятають тишу більше, ніж подальше пояснення.

Після — якщо ми це закриємо

Якщо ми це закриємо

Сервіс відновлено, безпосередня причина відома, а небезпечний обхідний шлях — якщо він був потрібний — записаний, щоб його можна було замінити.

Впізнаєте ситуацію? Напишіть нам — розберемо.

02

Чому так стається

Звідки це зазвичай береться, чому з’являється в швидкій чи ШІ-роботі, і як перевірити самостійно.

Поширені причини збою виробництва

Більшість збоїв мають останню зміну, насичений ресурс або залежність. Знайти, який з них є роботою.

Поганий випуск або погана конфігурація

Прапор, секрет, сертифікат або зображення контейнера, яке не працює лише в реальному масштабі.

Вичерпання бази даних або диска

Підключення, блокування, повний том або міграція, яка не завершиться.

Зміни DNS, TLS або маршрутизації

Запис, сертифікат або правило балансування навантаження, яке більше не вказує на справне походження.

Залежність або квота

Хмарний ліміт, оплата рахунку або збій третьої сторони без тайм-ауту.

Подія безпеки або ємності

Атака, стрибок трафіку або процес, який зник після розгортання.

Чому молоді стеки та згенеровані розгортання зазнають серйозної невдачі на публіці

Згенерований конвеєр або контейнер «працює на моїй машині» часто вперше зустрічаються у виробництві в день запуску. Швидкі стартапи також пропускають runbooks, тому перше відключення також є першою репетицією.

Інцидент Human First усе ще починається з останньої зміни та журналів, а не з обнадійливого сценарію перезапуску, написаного моделлю в середині виклику.

Що перевірити в першу чергу, коли веб-сайт не працює

Збирайте докази на ходу. Перезавантаження може допомогти, а також стерти необхідне зображення.

  • Підтвердьте область

    Які URL-адреси, які регіони, які користувачі та чи це повне чи погіршене.

  • Перевірте останню зміну

    Розгортання, DNS, сертифікат, зміна хмари або робота. Запишіть час.

  • Подивіться на справність програми, бази даних і диска

    Один із них часто вже говорить правду.

  • Подивіться, чи відкат очевидний і безпечний

    Відомий останній гарний артефакт є подарунком, якщо це дозволяють дані.

  • Зверніть увагу, чи може це бути інцидент безпеки

    Пошкодження, викуп або неочікуваний адмін. Це змінює порядок роботи. Перегляньте також сторінку зламаного сайту.

Впізнаєте ситуацію? Напишіть нам — розберемо.

03

Як DevHero це виправляє

Веде досвідчений спеціаліст. ШІ — інструмент. Людина перевіряє результат.

Відключення хаотичні. Спокійний фахівець, який побачив цю форму невдачі, корисний саме тому, що ви перебуваєте в її центрі.

DevHero перш за все людина. Пишеш, бачиш фахівця, і цю людину можна попередити, зателефонувати. AI може допомогти нам сканувати журнали. Людина керує відновленням і перевіряє виправлення. Ми не приймаємо всі запити на підтримку. Ми беремо жорстку систему, яка потребує інженера, а не сценарію довідкового центру.

Ви пишете, ви бачите ім’я, і цю людину можна попередити та зателефонувати. AI може допомогти нам сканувати журнали. Людина керує відновленням і перевіряє виправлення.

How a typical weekday case moves

  1. 01Повідомлення отримано
  2. 02Спеціаліста названо
  3. 03Діагностика
  4. 04Виправлення
  5. 05Перевірка людиною
  6. 06Передача

Як отримати фахівця на відключення під напругою

Напишіть зараз у WhatsApp або Telegram. Якщо потрібно бути першим у черзі, запитайте про терміновий перехід на 1 позицію. Робота у вихідні – окремий товар, будь-яка доплата вказана наперед.

  1. Скажіть, що виробництво не працює, і що ви вже пробували

    Час, URL-адреси, останнє розгортання та те, чи ви відкочувалися.

  2. Названий спеціаліст попереджений

    За хвилину ви побачите їх ім'я. Їх можна викликати, якщо вони не відповідають.

  3. Відновіть безпечний шлях через 24 години, якщо в зоні дії, часто набагато раніше, якщо причина зрозуміла

    Довша програма надійності – це складний проект.

Як DevHero працює в разі збою виробництва

Ми приєднуємося до інциденту, відновлюємо безпечний шлях до життя, а потім розповідаємо вам, що ще потребує остаточного виправлення. Людина перевіряє відновлення.

Ми приєднуємося до інциденту, переглядаємо останню зміну, залежності, журнали та стан даних, а потім відновлюємо безпечний шлях до життя. Після того, як він буде готовий, ми розповімо вам, що ще потребує остаточного виправлення. Довша програма надійності – це складний проект. Робота у вихідні – окремий продукт; будь-яка доплата вказується заздалегідь, перед дзвінком.

  1. Приєднайтеся до хронології

    Остання зміна, обсяг і те, що вже випробувано.

  2. Стабілізація

    Відкат, відновлення після відмови або обмеження, яке повертає завдання користувача назад, якщо це безпечно.

  3. Знайдіть причину з достатньою кількістю доказів

    Журнали, здоров’я, диск, залежності — без знищення єдиної копії сліду, якщо ми можемо цього уникнути.

  4. Запустіть довгострокове виправлення або назвіть це

    Деякі причини потребують подальшого розгляду. Ми не будемо вдавати, що перезавантаження є аналізом першопричини.

  5. Запишіть небезпечний обхідний шлях, якщо він потрібен

    Так можна замінити.

Що ви отримуєте в перші години після збою та протягом 24 годин

Перша мета — відновити безпечний шлях. 24-годинна ціль, у типовому випадку буднього дня, є причиною та перевіреним відновленням.

  1. Спеціаліст з інциденту, названий, коли ви на сеансі.

  2. Обслуговування відновлено або чітке обмеження, якщо це можливо з доступом, який ми маємо.

  3. Причина або звужений набір причин, якщо говорити простою мовою.

  4. Примітка про будь-який обхідний шлях, який не повинен залишатися.

  5. Відновлення, перевірене людиною, і подальше спостереження, якщо надійність залишається.

Що нам надсилати, коли виробництво не працює

Швидкість має значення. Кілька фактів запобігають сліпому перезапуску. Не вставляйте активні паролі в чат.

URL-адреси та час початку

Плюс часовий пояс.

Що бачать користувачі

Помилки, порожні сторінки, помилки входу, збій платежів.

Остання зміна

Розгортання, DNS, сертифікат або хмарна подія.

Що ти вже пробував

Перезапуск, відкат, масштабування або невдале відновлення після відмови.

Як ми можемо підключитися до системи з вами

Узгоджений канал і авторизований доступ.

Швидкі та термінові виправлення

Перші 4 години зі спеціалістом + ШІ без обмежень: безкоштовно, один раз на клієнта. Подальша робота платна, за запитом. Людина веде роботу й перевіряє результат.

Безкоштовно (перша сесія)

Складні проєкти

Більша робота йде за іншим тарифом, за запитом. Ми кажемо про це, перш ніж продовжити.

За запитом

Будні, потім вихідні

Базовий план — лише будні. Робота у вихідні — окремий продукт. Будь-яка надбавка називається заздалегідь, до дзвінка, і залежить від складності. Сума: за запитом.

За запитом

Перша сесія безкоштовна: перші 4 години зі спеціалістом плюс ШІ без обмежень, один раз на клієнта. Робота понад це, тариф складних проєктів і тариф вихідних — платні, за запитом.

Одна безкоштовна сесія на клієнта: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент.

Впізнаєте ситуацію? Напишіть нам — розберемо.

04

Щоб залишилось виправленим

Чого не робити далі, які стеки ми бачимо в такій роботі і як утримати виправлення.

Чого не можна робити під час збою

Рух — це не те саме, що відновлення. Деякі рухи ускладнюють наступну годину.

Перезапуск усього перед записом журналів

Ви можете ненадовго одужати і втратити справу.

Розгортання нового припущення поверх застряглого випуску

Ви можете втратити останній гарний артефакт.

Обговорення ідеального посмертного дослідження, поки воно ще не працює

Спочатку віднови, а потім пиши.

Публікація детальної технічної теорії, перш ніж ви це дізнаєтесь

Ви можете помилятися, і ви можете виявити шлях, який ви не закрили, якщо це також подія безпеки.

Ігнорування можливості порушення

Якщо сайт зіпсовано або дані витікають, перегляньте зламаний веб-сайт і сторінки безпеки та скажіть про це заздалегідь.

Де ми бачимо падіння виробництва

Скажіть нам стек і хост. Якщо ми не повинні це брати, ми це скажемо.

Веб-програми та API на типових хмарах і PaaS

AWS, GCP, Azure та простіші хости.

Бази даних і черги, які беруть із собою додаток

Postgres, MySQL, Redis і робочі завдання.

DNS, TLS і балансувальники навантаження

Край, який може виглядати як збій програми.

Платформи випуску

Зміна CI/CD, яка стала збоєм. Дивіться також невдалі розгортання.

Після відновлення виробництва: як скоротити наступний збій

Відновлення є неповним, якщо той самий рух знищить вас завтра.

Right after the fix

Напишіть часову шкалу, поки вона свіжа

Причина, обхідний шлях і остаточне вирішення.

Потренуватися в відкоті

Відкат, якого ви ніколи не пробували, - це надія.

Додайте відсутню перевірку справності завдання користувача

Не лише на статичній сторінці.

Розмістіть тайм-аути та дискові сигнали там, де їх не було

Нудні перевірки.

As you keep shipping

Окремі незворотні зміни даних від першого розгортання

Коли зможеш.

Домовтеся, кому і як можна дзвонити

Ім'я та шлях, а не груповий чат із п'ятдесятьма людьми.

Перегляньте згенеровані зміни в розгортанні, перш ніж їх опублікувати

Трубопровід, якого ви не розумієте, зазнає збою публічно.

Впізнаєте ситуацію? Напишіть нам — розберемо.

05

Питання про цю проблему

Прямі відповіді про цю проблему, сесію і те, що буде далі.

Треба було вже відкотитися?

Якщо у вас є відомий останній успішний випуск і безпечний відкат, скажіть, що ви вже пробували.

Що робити, якщо це інцидент із безпекою, а не збій?

Скажи це. Таким порядком роботи ми будемо ставитися до цього. Перегляньте також сторінки на зламаному веб-сайті та про діри в безпеці.

Чи можу я перескочити в чергу?

Так. Запитайте про терміновий переїзд на позицію 1. Стартова ціна 99 USD, поки черга порожня, її можна переглянути пізніше.

Як мені почати?

Напишіть зараз у WhatsApp або Telegram. Ні форми, ні веб-чату.

Ти працюєш у вихідні за замовчуванням?

Ні. Базовий план - робочі дні. Робота у вихідні – це окремий продукт, і будь-яка доплата вказується заздалегідь, перед дзвінком.

Вигадаєш відсоток доступності?

Ні. Ми поговоримо про цей інцидент і про те, що ми змінили.

Чи можеш ти залишитися, коли він повернеться?

Якщо ви хочете перевірити надійність, ми пропонуємо ставку відповідності та підписуємося на цю роботу.

Наша сторінка статусу все ще зелена. Це означає, що ми встали?

Ні, якщо завдання користувача не працює. Перевірки стану здоров’я можуть виявити не те.

Ви приймаєте всі запити в службу підтримки?

Ні. Ми беремо жорстку систему, для якої потрібен інженер, а не сценарій довідкового центру.

Перша сесія справді безкоштовна?

Так. Кожен клієнт має одну безкоштовну сесію: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент. Лінія «24 години» — це строк, за який ми прагнемо почати й закрити типовий буденний випадок у межах обсягу, а не 24 години неоплачуваної роботи. Подальша робота платна, за запитом.

Human First

Продакшен лежить. Вирішимо за 24 години.

Якщо виробництво вже зупинено, напишіть зараз у WhatsApp або Telegram. Ви будете говорити з людиною.

Одна безкоштовна сесія на клієнта: перші 4 години зі спеціалістом плюс ШІ без обмежень як інструмент.

Human First

Оберіть канал

Без вебформи й вебчату. Напишіть у WhatsApp або Telegram — відповість спеціаліст. Повідомлення вже заповнене проблемою і сторінкою.

Telegram відкриє чат із @brnzai. Текст часто не вставляється сам — скопіюйте його й надішліть там: