Działająca witryna lub interfejs API nie działają albo są w takim stopniu zdegradowane, że klienci nie mogą z nich korzystać.
Jedna darmowa sesja na klienta: pierwsze 4 godziny ze specjalistą plus nieograniczone AI jako narzędzie.
Prawdziwy starszy specjalista prowadzi. Imię w pierwszej odpowiedzi. AI jest narzędziem; człowiek sprawdza wynik.
01
Jak wygląda ten problem, po czym to poznać i co jest na szali, jeśli zostanie.
Jak wygląda przerwa w produkcji, dlaczego każda minuta jest publiczna i dlaczego spokojny specjalista przydaje się w środku hałasu.
Kontrole stanu kończą się niepowodzeniem. Za modułem równoważenia obciążenia nie kryje się nic zdrowego. Wdrożenie poszło nie tak. Certyfikat, dysk, baza danych, zmiana DNS lub zależność zabrały ze sobą usługę. Strony stanu już się podświetlają.
Każda minuta jest publiczna. Zostaniesz poproszony o podanie ETA, którego nie posiadasz. Zespół jest w trakcie rozmowy telefonicznej i wciąż spiera się o pierwszy krok.
Czas sprawności to obietnica, którą złożyłeś już swoim użytkownikom, nawet jeśli nigdy nie została spisana. Kiedy produkcja spada, ta obietnica jest już złamana. Praca polega na uczciwym przywróceniu go.
Chcesz go odzyskać, z przyczyny, a nie ponownego uruchomienia, które za godzinę znowu się nie powiedzie.
Gdy produkcja jest wyłączona, działająca witryna lub interfejs API są w trybie offline lub są tak uszkodzone, że klienci nie mogą z nich korzystać. Chcesz, aby został przywrócony z konkretną przyczyną, a nie ponownym uruchomieniem, który za godzinę zakończy się niepowodzeniem.
Wdrożenie, certyfikat, dysk, baza danych, zmiana DNS lub zależność mogą pociągać za sobą usługę. Strony stanu podświetlą się. Zespół jest już po rozmowie telefonicznej i wciąż kłóci się o pierwszy krok.
Praca weekendowa to osobny produkt; wszelkie dodatkowe opłaty są podawane z góry, przed rozmową. Nie przyjmujemy każdej prośby o wsparcie. Zajmujemy się trudnym systemem, który wymaga inżyniera.
Są to sygnały świadczące o awarii, nawet jeśli jeden region lub jedna ścieżka nadal nie działa.
Instancje kończą się niepowodzeniem lub rozpoczynają się i kończą w pętli.
Marketingowa strona główna może nadal znajdować się w sieci CDN, mimo że aplikacja nie działa.
5xx, przekroczenia limitu czasu lub odmowa połączenia dla więcej niż jednego użytkownika.
Niektóre węzły zostały przeniesione lub migracja jest w połowie i nikt nie chce tego dotykać.
Prawdziwą awarią jest DNS, baza danych, kolejka lub partnerskie API.
Ponowne uruchomienie nie było przyczyną, tylko pauzą.
Przed — jeśli zostawisz to
Gdy sytuacja się pogarsza, tracisz sprzedaż, zaufanie i czas ludzi, którzy bardziej zapamiętają ciszę niż późniejsze wyjaśnienia.
Po — jeśli my to zamkniemy
Serwis powrócił, znana jest bezpośrednia przyczyna i niebezpieczne obejście — jeśli było potrzebne — zostało zapisane, aby można było je wymienić.
Znasz tę sytuację? Napisz do nas, rozkminimy to.
02
Skąd to zwykle się bierze, dlaczego pojawia się w szybkiej lub wspomaganej AI pracy, i jak sprawdzić to samemu.
Większość przestojów ma ostatnią zmianę, nasycone zasoby lub zależność. Ustalenie, który z nich jest dziełem.
Flaga, sekret, certyfikat lub obraz kontenera, który zawodzi tylko w rzeczywistej skali.
Połączenia, blokady, pełny wolumin lub migracja, która nie zostanie zakończona.
Rekord, certyfikat lub reguła modułu równoważenia obciążenia, która nie wskazuje już prawidłowych źródeł.
Limit chmury, płatność za konto lub awaria strony trzeciej bez limitu czasu.
Atak, gwałtowny wzrost ruchu lub proces, który zakończył się po wdrożeniu.
Wygenerowany potok lub kontener „działa na mojej maszynie” często po raz pierwszy trafia do produkcji w dniu premiery. Szybkie start-upy również pomijają runbooki, więc pierwsza przerwa jest jednocześnie pierwszą próbą.
Incydent Human First nadal zaczyna się od ostatniej zmiany i dzienników, a nie od pełnego nadziei skryptu restartu napisanego przez modelkę w trakcie rozmowy.
Rejestruj dowody na bieżąco. Ponowne uruchomienie może pomóc, a także wyczyścić potrzebny obraz.
Które adresy URL, które regiony, którzy użytkownicy i czy są one całkowite, czy zdegradowane.
Wdrożenie, DNS, certyfikat, zmiana w chmurze lub zadanie. Zapisz godzinę.
Jeden z nich często już mówi prawdę.
Znany, ostatni dobry artefakt jest prezentem, jeśli pozwalają na to dane.
Zniesławienie, okup lub nieoczekiwany administrator. To zmienia porządek pracy. Zobacz także stronę witryny zaatakowanej przez hakerów.
Znasz tę sytuację? Napisz do nas, rozkminimy to.
03
Prowadzi doświadczony specjalista. AI jest narzędziem. Człowiek sprawdza wynik.
Awarie są chaotyczne. Spokojny specjalista, który widział ten kształt porażki, przyda się właśnie dlatego, że jesteś w jej środku.
DevHero jest przede wszystkim człowiekiem. Piszesz, widzisz nazwisko specjalisty, a tę osobę można powiadomić i zadzwonić. Sztuczna inteligencja może nam pomóc skanować logi. Odzyskiem i sprawdzeniem rozwiązania zajmuje się człowiek. Nie przyjmujemy każdej prośby o wsparcie. Bierzemy pod uwagę trudny system, który wymaga inżyniera, a nie skryptu centrum pomocy.
Piszesz, widzisz imię i można powiadomić tę osobę i zadzwonić do niej. Sztuczna inteligencja może nam pomóc skanować logi. Odzyskiem i sprawdzeniem rozwiązania zajmuje się człowiek.
How a typical weekday case moves
Napisz teraz na WhatsAppie lub Telegramie. Jeśli chcesz być pierwszy w kolejce, zapytaj o pilne przejście na stanowisko 1. Praca w weekendy to osobny produkt, a ewentualna dopłata jest podana z góry.
Czasy, adresy URL, ostatnie wdrożenie i informacja o tym, czy wycofano zmiany.
W ciągu minuty powinieneś zobaczyć jego nazwę. Można do nich zadzwonić, jeśli nie odpowiadają.
Dłuższy program niezawodności to złożony projekt.
Dołączamy się do zdarzenia, przywracamy bezpieczną ścieżkę do życia, a następnie informujemy, co wymaga jeszcze trwałego naprawienia. Człowiek sprawdza powrót do zdrowia.
Dołączamy się do incydentu, przyglądamy się ostatniej zmianie, zależnościom, logom i kondycji danych, a następnie przywracamy bezpieczną ścieżkę życia. Po zakończeniu powiemy Ci, co nadal wymaga trwałej naprawy. Dłuższy program niezawodności to złożony projekt. Praca weekendowa to odrębny produkt; wszelkie dodatkowe opłaty są podawane z góry, przed rozmową.
Ostatnia zmiana, zakres i to, co już zostało wypróbowane.
Wycofywanie zmian, przełączanie awaryjne lub powstrzymywanie, które przywraca zadanie użytkownika, jeśli jest to bezpieczne.
Logi, stan zdrowia, dysk, zależności — bez niszczenia jedynej kopii szlaku, jeśli możemy tego uniknąć.
Niektóre przyczyny wymagają dalszych działań. Nie będziemy udawać, że ponowne uruchomienie jest analizą przyczyny źródłowej.
Można więc go wymienić.
Pierwszym celem jest przywrócenie bezpiecznej ścieżki. Celem 24-godzinnym, w typowym przypadku w dzień powszedni, jest przyczyna i sprawdzony powrót do zdrowia.
Specjalista ds. zdarzenia zostanie wskazany po zakończeniu sesji.
Przywrócono usługę lub całkowicie zabezpieczono, jeśli jest to możliwe przy dostępie, jaki mamy.
Przyczyna lub zawężony zbiór przyczyn, w prostym języku.
Informacja o obejściu, które nie może pozostać.
Odzyskiwanie kontrolowane przez człowieka i działania następcze, jeśli nadal konieczne są prace nad niezawodnością.
Szybkość ma znaczenie. Kilka faktów uniemożliwia ślepy restart. Nie wklejaj aktywnych haseł na czacie.
Plus strefa czasowa.
Błędy, puste strony, błędy logowania, niepowodzenie płatności.
Wdróż, DNS, certyfikat lub zdarzenie w chmurze.
Ponowne uruchomienie, wycofanie zmian, zwiększenie skali lub nieudane przełączenie awaryjne.
Uzgodniony kanał i autoryzowany dostęp.
Pierwsze 4 godziny ze specjalistą + nieograniczone AI: za darmo, raz na klienta. Dalsza praca jest płatna, na zapytanie. Człowiek prowadzi i sprawdza wynik.
Za darmo (pierwsza sesja)
Większa praca ma inną stawkę, na zapytanie. Mówimy o tym, zanim pójdziemy dalej.
Na zapytanie
Plan podstawowy obejmuje tylko dni robocze. Praca w weekend to osobny produkt. Każda dopłata jest podawana z góry, przed rozmową, i zależy od złożoności. Kwota: na zapytanie.
Na zapytanie
Pierwsza sesja jest darmowa: pierwsze 4 godziny ze specjalistą plus nieograniczone AI, raz na klienta. Dalsza praca, stawka złożonych projektów i stawka weekendowa są płatne, na zapytanie.
Jedna darmowa sesja na klienta: pierwsze 4 godziny ze specjalistą plus nieograniczone AI jako narzędzie.
Znasz tę sytuację? Napisz do nas, rozkminimy to.
04
Czego nie robić dalej, jakie stacki widzimy w takiej pracy i jak utrzymać poprawkę.
Ruch to nie to samo, co regeneracja. Niektóre ruchy sprawiają, że następna godzina jest trudniejsza.
Możesz uzyskać krótki powrót do zdrowia i utracić przyczynę.
Możesz stracić ostatni dobry artefakt.
Najpierw przywróć, potem pisz.
Możesz się mylić i możesz odkryć ścieżkę, której nie zamknąłeś, jeśli jest to również zdarzenie związane z bezpieczeństwem.
Jeśli witryna została zniszczona lub doszło do wycieku danych, zapoznaj się z witryną zaatakowaną przez hakerów oraz stronami zabezpieczeń i poinformuj o tym odpowiednio wcześnie.
Podaj nam stos i hosta. Jeśli nie powinniśmy tego przyjąć, powiemy to.
AWS, GCP, Azure i prostsze hosty.
Postgres, MySQL, Redis i pracownicy pośrednicy.
Krawędź, która może wyglądać na awarię aplikacji.
Zmiana CI/CD, która spowodowała awarię. Zobacz także nieudane wdrożenia.
Powrót do zdrowia nie jest kompletny, jeśli ten sam ruch miałby cię jutro powalić.
Przyczyna, obejście i trwałe rozwiązanie.
Wycofywanie, jakiego nigdy nie próbowałeś, jest nadzieją.
Nie tylko na stronie statycznej.
Nudne sprawdzanie.
Kiedy możesz.
Nazwa i ścieżka, a nie czat grupowy z pięćdziesięcioma osobami.
Rurociąg, którego nie rozumiesz, publicznie zawiedzie.
Znasz tę sytuację? Napisz do nas, rozkminimy to.
05
Proste odpowiedzi o tym problemie, sesji i tym, co dalej.
Jeśli znasz ostatnią dobrą wersję i bezpieczne wycofanie, powiedz, co już wypróbowałeś.
Powiedz to. Potraktujemy to w takiej kolejności pracy. Zobacz także strony dotyczące zhakowanej witryny internetowej i luki w zabezpieczeniach.
Tak. Zapytaj o pilne przejście na pozycję 1. Cena początkowa wynosi 99 USD, gdy kolejka jest pusta i można ją później skorygować.
Napisz teraz na WhatsAppie lub Telegramie. Bez formularza, bez czatu internetowego.
Nie. Abonament podstawowy obejmuje dni powszednie. Praca w weekendy to odrębny produkt, a ewentualna dopłata jest podana z góry, przed rozmową telefoniczną.
Nie. Porozmawiamy o tym incydencie i tym, co zmieniliśmy.
Jeśli potrzebujesz kontroli niezawodności, oferujemy odpowiednią stawkę i podpisujemy umowę na tę pracę.
Nie, jeśli zadanie użytkownika nie działa. Kontrole stanu zdrowia mogą zwracać uwagę na niewłaściwe rzeczy.
Nie. Przyjmujemy skomplikowany system, który wymaga inżyniera, a nie skryptu z centrum pomocy.
Tak. Każdy klient ma jedną darmową sesję: pierwsze 4 godziny ze specjalistą plus nieograniczone AI jako narzędzie. Linia 24 godzin to czas, w którym chcemy rozpocząć i zamknąć typową sprawę w dzień roboczy w zakresie — nie 24 godziny nieodpłatnej pracy. Dalsza praca jest płatna, na zapytanie.
Jeśli produkcja już się zakończyła, napisz teraz na WhatsAppie lub Telegramie. Porozmawiasz z osobą.
Jedna darmowa sesja na klienta: pierwsze 4 godziny ze specjalistą plus nieograniczone AI jako narzędzie.