Livesajten eller API:et är nere, eller så försämrad att kunder inte kan använda den.
En gratissession per kund: de första 4 timmarna med en specialist, plus obegränsad AI som verktyg.
En riktig senior specialist leder. Namn i det första svaret. AI är ett verktyg; en människa granskar resultatet.
01
Hur det här problemet ser ut, hur du känner igen det, och vad som står på spel om det får vara.
Hur ett produktionsavbrott ser ut, varför varje minut känns offentlig och varför en lugn specialist är användbar mitt i bruset.
Hälsokontroller misslyckas. Lastbalanseraren har inget hälsosamt bakom sig. En distribution gick fel. Ett certifikat, en disk, en databas, en DNS-ändring eller ett beroende tog tjänsten med sig. Statussidor lyser redan upp.
Varje minut känns offentlig. Du blir tillfrågad om en ETA som du inte har. Teamet är i ett samtal och bråkar fortfarande om det första steget.
Upptid är ett löfte du redan har gett dina användare, även om det aldrig skrivits ned. När produktionen ligger nere är det löftet redan brutet. Arbetet är att återställa det ärligt.
Du vill ha tillbaka den, med en orsak, inte en omstart som kommer att misslyckas igen om en timme.
När produktionen är nere är livesajten eller API:et offline eller så försämrad att kunder inte kan använda den. Du vill ha tillbaka den med en orsak, inte en omstart som kommer att misslyckas igen om en timme.
En distribution, ett certifikat, en disk, en databas, en DNS-ändring eller ett beroende kan ta tjänsten med sig. Statussidor tänds. Teamet har redan ett samtal och bråkar fortfarande om det första steget.
Helgarbete är en separat produkt; eventuell tilläggsavgift anges i förväg, innan ett samtal. Vi tar inte emot varje supportförfrågan. Vi tar ett hårt nersystem som behöver en ingenjör.
Detta är signaler om att du är i ett avbrott, även om en region eller en väg fortfarande är uppe.
Instanser misslyckas, eller så startar och dör de i en loop.
En marknadsföringshemsida kan fortfarande finnas på ett CDN medan appen är död.
5xx, timeouts eller anslutning nekad, för mer än en användare.
Vissa noder har flyttats, eller en migrering är halvvägs och ingen vill röra vid den.
DNS, en databas, en kö eller ett partner-API är det verkliga avbrottet.
Omstarten var inte en orsak, bara en paus.
Före — om du låter det vara
Medan det är nere förlorar du försäljning, förtroende och tid från människor som kommer ihåg tystnaden mer än den senare förklaringen.
Efter — om vi stänger det
Tjänsten är tillbaka, den omedelbara orsaken är känd och den osäkra lösningen – om en sådan behövdes – skrivs ner så att den kan ersättas.
Känner du igen situationen? Skriv till oss, vi reder ut det.
02
Varifrån det brukar komma, varför det syns i snabbt eller AI-stött arbete, och hur du själv kan kontrollera.
De flesta avbrott har en sista förändring, en mättad resurs eller ett beroende. Att hitta vilken som är verket.
En flagga, en hemlighet, ett certifikat eller en behållarbild som bara misslyckas i levande skala.
Anslutningar, lås, en full volym eller en migrering som inte kommer att slutföras.
En post, ett certifikat eller en lastbalanseringsregel som inte längre pekar på sunda ursprung.
En molngräns, en betalning av kontot eller ett avbrott från tredje part utan timeout.
En attack, en trafikökning eller en process som sprang iväg efter en utplacering.
En genererad pipeline eller en "works on my machine"-behållare möter ofta produktionen för första gången på en lanseringsdag. Snabba startups hoppar också över runbooks, så det första avbrottet är också den första repetitionen.
En Human First-incident börjar fortfarande med den senaste ändringen och loggarna, inte med ett hoppfullt omstartsskript skrivet av en modell mitt i samtalet.
Fånga bevis allt eftersom. En omstart kan hjälpa och även torka bilden du behövde.
Vilka webbadresser, vilka regioner, vilka användare och om det är totalt eller försämrat.
Implementera, DNS, certifikat, molnbyte eller ett jobb. Skriv ner tiden.
En av dem talar ofta redan sanningen.
En känd sista bra artefakt är en gåva, om data tillåter det.
Förstöring, lösen eller oväntad administratör. Det ändrar arbetsordningen. Se även sidan för hackad webbplats.
Känner du igen situationen? Skriv till oss, vi reder ut det.
03
En senior specialist leder. AI är ett verktyg. En människa granskar resultatet.
Avbrott är kaotiska. En lugn specialist som har sett denna form av misslyckande är användbar just för att du är mitt uppe i det.
DevHero är människan först. Du skriver, du ser en specialists namn och den personen kan larmas och ringas upp. AI kan hjälpa oss att skanna loggar. En människa leder återhämtningen och kontrollerar åtgärden. Vi tar inte emot varje supportförfrågan. Vi tar ett hårt nersystem som behöver en ingenjör, inte ett hjälpcenterskript.
Du skriver, du ser ett namn och den personen kan larmas och ringas upp. AI kan hjälpa oss att skanna loggar. En människa leder återhämtningen och kontrollerar åtgärden.
How a typical weekday case moves
Skriv på WhatsApp eller Telegram nu. Om du behöver stå först i kön, fråga om den akuta flytten till position 1. Helgarbete är en separat produkt, med eventuell tilläggsavgift angiven i förväg.
Tider, webbadresser, senaste distribution och om du återställde.
Inom en minut bör du se deras namn. De kan ringas om de inte svarar.
Ett längre tillförlitlighetsprogram är ett komplext projekt.
Vi ansluter oss till incidenten, återställer en säker väg att leva och berättar sedan vad som fortfarande behöver åtgärdas. En människa kontrollerar återhämtningen.
Vi ansluter oss till incidenten, tittar på den senaste förändringen, beroenden, loggarna och datatillståndet och återställer sedan en säker väg att leva. När den är klar berättar vi vad som fortfarande behöver en varaktig åtgärd. Ett längre tillförlitlighetsprogram är ett komplext projekt. Helgarbete är en separat produkt; eventuell tilläggsavgift anges i förväg, innan ett samtal.
Senaste ändring, omfattning och vad som redan har prövats.
Återställning, failover eller en inneslutning som tar tillbaka användarjobbet, om det är säkert.
Loggar, hälsa, disk, beroenden — utan att förstöra den enda kopian av spåret om vi kan undvika det.
Vissa orsaker behöver en uppföljning. Vi kommer inte att låtsas att en omstart är en rotorsaksanalys.
Så den kan bytas ut.
Det första målet är att återställa en säker väg. 24-timmarsmålet, på ett typiskt vardagsfall i omfattning, är en orsak och en kontrollerad återhämtning.
En specialist på händelsen, namngiven, när du är i sessionen.
Tjänsten återställd, eller en tydlig inneslutning, om det är möjligt med den åtkomst vi har.
En orsak, eller en begränsad uppsättning orsaker, i klartext.
En anteckning om eventuella lösningar som inte får stanna.
En människokontrollerad återhämtning, och en uppföljning om tillförlitlighetsarbete återstår.
Hastigheten spelar roll. Några fakta förhindrar en blind omstart. Klistra inte in livelösenord i chatten.
Plus tidszonen.
Fel, tomma sidor, inloggningsfel, betalningar misslyckas.
Implementera, DNS, certifikat eller molnhändelse.
Omstart, återställning, uppskalning eller en misslyckad failover.
En överenskommen kanal och auktoriserad åtkomst.
Första 4 timmarna med en specialist + obegränsad AI: gratis, en gång per kund. Fortsatt arbete är betalt, på förfrågan. En människa leder och granskar resultatet.
Gratis (första sessionen)
Större arbete har en annan taxa, på förfrågan. Vi säger det innan vi går vidare.
På förfrågan
Grundplanen gäller bara vardagar. Helgarbete är en separat produkt. Eventuellt tillägg anges i förväg, före varje samtal, och beror på komplexitet. Belopp: på förfrågan.
På förfrågan
Den första sessionen är gratis: de första 4 timmarna med en specialist, plus obegränsad AI, en gång per kund. Arbete därefter, taxan för komplexa projekt och helgtaxan är betalda, på förfrågan.
En gratissession per kund: de första 4 timmarna med en specialist, plus obegränsad AI som verktyg.
Känner du igen situationen? Skriv till oss, vi reder ut det.
04
Vad du inte ska göra sedan, vilka stackar vi ser i den här typen av arbete, och hur fixen håller.
Rörelse är inte detsamma som återhämtning. Vissa drag gör nästa timme svårare.
Du kan få en kort återhämtning och förlora orsaken.
Du kan förlora den sista bra artefakten.
Återställ först och skriv sedan.
Du kan ha fel, och du kan avslöja en sökväg som du inte har stängt om detta också är en säkerhetshändelse.
Om webbplatsen förstördes eller data läcker, se den hackade webbplatsen och säkerhetssidorna och säg det tidigt.
Berätta för oss stacken och värden. Om vi inte skulle ta det så säger vi det.
AWS, GCP, Azure och enklare värdar.
Postgres, MySQL, Redis och jobbarbetare.
Kanten som kan se ut som ett programfel.
En CI/CD-byte som blev ett avbrott. Se även misslyckade distributioner.
En återhämtning är ofullständig om samma drag skulle ta dig ner i morgon.
Orsak, lösning och den bestående korrigeringen.
En återställning ni aldrig har testat är bara ett hopp.
Inte bara på en statisk sida.
Tråkiga checkar.
När du kan.
Ett namn och en sökväg, inte en gruppchatt med femtio personer.
En pipeline som du inte förstår kommer att misslyckas offentligt.
Känner du igen situationen? Skriv till oss, vi reder ut det.
05
Raka svar om det här problemet, sessionen och vad som händer sedan.
Om du har en känd senaste bra release och en säker återställning, säg vad du redan försökt.
Säg det. Vi kommer att behandla det med den arbetsordningen. Se även sidorna på en hackad webbplats och om säkerhetshål.
Ja. Fråga om den brådskande flytten till position 1. Startpriset är 99 USD medan kön är tom, och det kan revideras senare.
Skriv på WhatsApp eller Telegram nu. Inget formulär, ingen webbchatt.
Nej. Grundplanen är vardagar. Helgarbete är en separat produkt och eventuell tilläggsavgift anges i förväg, innan ett samtal.
Nej. Vi pratar om den här incidenten och vad vi ändrade.
Vill du ha en tillförlitlighetsuppföljning erbjuder vi matchningsgraden och vi skriver på för det arbetet.
Inte om användarjobbet är nere. Hälsokontroller kan titta på fel sak.
Nej. Vi tar ett system som ligger nere och behöver en ingenjör, inte ett skript från en hjälpsida.
Ja. Varje kund får en gratissession: de första 4 timmarna med en specialist, plus obegränsad AI som verktyg. 24-timmarslinjen är den tid vi siktar på att starta och stänga ett typiskt vardagsärende inom ramen, inte 24 timmars obetalt arbete. Fortsatt arbete är betalt, på förfrågan.
Om produktionen redan är nere, skriv på WhatsApp eller Telegram nu. Du kommer att prata med en person.
En gratissession per kund: de första 4 timmarna med en specialist, plus obegränsad AI som verktyg.