DEVHERO Schrijf op WhatsApp
HelplineEchte mensen, geen AI. Hulp binnen 24 uur
Human First
productie ligt plat

De productie ligt plat. We lossen het binnen 24 uur op.

De live site of API is offline of zo slecht dat klanten deze niet kunnen gebruiken.

  • Health checks of de load balancer hebben niets gezonds achter de rug
  • Klanten kunnen niet inloggen, betalen of de kernpagina laden
  • Foutpercentages stijgen en blijven hoog

Eén gratis sessie per klant: de eerste 4 uur met een specialist, plus onbeperkte AI als hulpmiddel.

Een echte senior specialist leidt. Naam bij het eerste antwoord. AI is een hulpmiddel; een mens controleert het resultaat.

01

Het probleem

Hoe dit probleem eruitziet, hoe u het herkent, en wat er op het spel staat als het blijft.

Hoe dit probleem eruitziet

Hoe een productiestoring eruit ziet, waarom elke minuut openbaar voelt, en waarom een ​​rustige specialist handig is midden in het lawaai.

Gezondheidscontroles mislukken en gebruikers kunnen de taak niet voltooien

Gezondheidscontroles mislukken. Er zit niets gezonds achter de load balancer. Een inzet ging mis. Een certificaat, een schijf, een database, een DNS-wijziging of een afhankelijkheid namen de service met zich mee. Statuspagina's lichten al op.

Er wordt u gevraagd om een verwachte aankomsttijd die u niet heeft

Elke minuut voelt openbaar. Er wordt u gevraagd om een ​​verwachte aankomsttijd die u niet heeft. Het team is in gesprek en heeft nog steeds ruzie over de eerste stap.

Uptime is een belofte die u al heeft gedaan

Uptime is een belofte die u al aan uw gebruikers hebt gedaan, ook al is deze nooit opgeschreven. Als de productie omlaag gaat, is die belofte al verbroken. Het werk is om het eerlijk te restaureren.

Je wilt het terug, met een reden, niet een herstart die binnen een uur weer mislukt.

Wanneer de productie uitvalt, is de live site of API offline of zo slecht dat klanten deze niet kunnen gebruiken. Je wilt het terug met een reden, niet een herstart die binnen een uur opnieuw mislukt.

Meer over hoe dit zich voordoet

Een implementatie, een certificaat, een schijf, een database, een DNS-wijziging of een afhankelijkheid kunnen de service meenemen. Statuspagina's lichten op. Het team is al aan het bellen en heeft nog steeds ruzie over de eerste stap.

Weekendwerk is een apart product; Eventuele toeslagen worden vooraf, vóór een gesprek, vermeld. Wij nemen niet elk ondersteuningsverzoek in behandeling. We nemen een hard down-systeem dat een ingenieur nodig heeft.

De productie van Signs ligt stil, niet alleen 'een beetje traag'

Dit zijn signalen dat u zich in een storing bevindt, zelfs als één regio of één pad nog actief is.

Health checks of de load balancer hebben niets gezonds achter de rug

Instanties mislukken, of ze starten en sterven in een lus.

Klanten kunnen niet inloggen, betalen of de kernpagina laden

Een marketinghomepage kan nog steeds op een CDN staan terwijl de app dood is.

Foutpercentages stijgen en blijven hoog

5xx, time-outs of verbinding geweigerd voor meer dan één gebruiker.

Een implementatie bevindt zich in een onbekende staat

Sommige knooppunten zijn verplaatst, of een migratie is halverwege, en niemand wil eraan komen.

Er is geen afhankelijkheid meer en uw app heeft geen uitwijkmogelijkheid

DNS, een database, een wachtrij of een partner-API is de echte storing.

Je bent al een keer opnieuw opgestart en het viel weer om

Het opnieuw opstarten was geen oorzaak, alleen een pauze.

Als het blijft liggen, en als het terugkomt met een oorzaak

Voor — als u het laat liggen

Als u het laat liggen

Als het niet werkt, verlies je omzet, vertrouwen en tijd van mensen die zich de stilte beter zullen herinneren dan de latere uitleg.

Na — als wij het afronden

Als wij het afronden

De service is terug, de directe oorzaak is bekend en de onveilige oplossing (indien nodig) is opgeschreven zodat deze kan worden vervangen.

Herkent u de situatie? Stuur ons een bericht, we zoeken het uit.

02

Waarom het gebeurt

Waar het meestal vandaan komt, waarom het opduikt in snel of AI-ondersteund werk, en hoe u het zelf checkt.

Veelvoorkomende oorzaken van een productiestoring

De meeste storingen hebben te maken met een laatste wijziging, een verzadigde bron of een afhankelijkheid. Uitzoeken welke het werk is.

Een slechte release of een slechte configuratie

Een vlag, een geheim, een certificaat of een containerimage die alleen op live schaal faalt.

Database- of schijfuitputting

Verbindingen, vergrendelingen, een volledig volume of een migratie die niet wordt voltooid.

DNS-, TLS- of routeringswijzigingen

Een record, een certificaat of een load balancer-regel die niet langer naar een gezonde oorsprong verwijst.

Een afhankelijkheid of een quotum

Een cloudlimiet, een betaling van de rekening of een storing van derden zonder time-out.

Een beveiligings- of capaciteitsgebeurtenis

Een aanval, een verkeerspiek of een proces dat na een implementatie is weggelopen.

Waarom jonge stacks en gegenereerde implementaties in het openbaar moeilijk mislukken

Een gegenereerde pijpleiding of een 'works on my machine'-container zal vaak voor het eerst in productie gaan op een lanceringsdag. Snelle startups slaan ook runbooks over, dus de eerste uitval is ook de eerste repetitie.

Een Human First-incident begint nog steeds met de laatste wijziging en de logs, niet met een hoopvol herstartscript geschreven door een model midden in de oproep.

Wat u eerst moet controleren als de website niet beschikbaar is

Leg bewijsmateriaal vast terwijl u bezig bent. Opnieuw opstarten kan helpen en ook de gewenste afbeelding wissen.

  • Bevestig het bereik

    Welke URL's, welke regio's, welke gebruikers, en of deze totaal of gedegradeerd is.

  • Controleer de laatste wijziging

    Implementeren, DNS, certificaat, cloudwijziging of een taak. Schrijf de tijd op.

  • Kijk naar de status van de app, de database en de schijf

    Eén daarvan vertelt vaak al de waarheid.

  • Kijk of een terugdraaiing voor de hand liggend en veilig is

    Een bekend laatste goed artefact is een geschenk, als de gegevens dit toelaten.

  • Let op of dit mogelijk een beveiligingsincident is

    Defacement, losgeld of onverwachte admin. Dat verandert de werkvolgorde. Zie ook de gehackte websitepagina.

Herkent u de situatie? Stuur ons een bericht, we zoeken het uit.

03

Hoe DevHero het oplost

Een senior specialist leidt. AI is een hulpmiddel. Een mens controleert het resultaat.

Storingen zijn chaotisch. Een rustige specialist die deze vorm van falen heeft gezien, is juist nuttig omdat je er middenin zit.

DevHero staat voor de mens. Je schrijft, je ziet de naam van een specialist, en die persoon kan worden gewaarschuwd en gebeld. AI kan ons helpen logs te scannen. Een mens leidt het herstel en controleert de oplossing. Wij nemen niet elk ondersteuningsverzoek in behandeling. We nemen een hard down-systeem dat een ingenieur nodig heeft, geen helpcentrumscript.

Je schrijft, je ziet een naam, en die persoon kan worden gewaarschuwd en gebeld. AI kan ons helpen logs te scannen. Een mens leidt het herstel en controleert de oplossing.

How a typical weekday case moves

  1. 01Bericht ontvangen
  2. 02Specialist genoemd
  3. 03Diagnose
  4. 04Oplossing
  5. 05Menselijke check
  6. 06Overdracht

Hoe u een specialist kunt inschakelen bij een livestoring

Schrijf nu op WhatsApp of Telegram. Moet je als eerste in de wachtrij staan, vraag dan naar de spoedverhuizing naar functie 1. Weekendwerk is een apart product, waarbij de eventuele toeslag vooraf wordt vermeld.

  1. Stel dat de productie is stilgevallen en wat je al hebt geprobeerd

    Tijden, URL's, laatste implementatie en of u een rollback hebt uitgevoerd.

  2. Een genoemde specialist wordt gewaarschuwd

    Binnen een minuut zou je hun naam moeten zien. Als ze niet reageren, kunnen ze gebeld worden.

  3. Herstel een veilig pad, binnen 24 uur indien binnen bereik, vaak veel eerder als de oorzaak duidelijk is

    Een langer betrouwbaarheidsprogramma is een complex project.

Hoe DevHero werkt bij een productie-down-incident

Wij sluiten ons aan bij het incident, herstellen een veilige levensweg en vertellen u vervolgens wat nog een blijvende oplossing nodig heeft. Een mens controleert het herstel.

We sluiten ons aan bij het incident, kijken naar de laatste wijziging, de afhankelijkheden, de logs en de gezondheid van de gegevens, en herstellen vervolgens een veilig levenspad. Nadat het klaar is, vertellen we u wat nog een blijvende oplossing nodig heeft. Een langer betrouwbaarheidsprogramma is een complex project. Weekendwerk is een apart product; Eventuele toeslagen worden vooraf, vóór een gesprek, vermeld.

  1. Sluit je aan bij de tijdlijn

    Laatste wijziging, reikwijdte en wat al is geprobeerd.

  2. Stabiliseren

    Rollback, failover of een containment die de gebruikerstaak terugbrengt, als dat veilig is.

  3. Vind de oorzaak met voldoende bewijs

    Logboeken, gezondheid, schijf, afhankelijkheden — zonder de enige kopie van het spoor te vernietigen als we dit kunnen vermijden.

  4. Breng een blijvende oplossing in beweging, of noem het maar op

    Sommige doelen hebben een vervolg nodig. We zullen niet doen alsof een herstart een analyse van de hoofdoorzaak is.

  5. Schrijf de onveilige oplossing op, indien nodig

    Het kan dus vervangen worden.

Wat u krijgt in de eerste uren na een storing, en binnen 24 uur

Het eerste doel is het herstellen van een veilig pad. Het 24-uursdoel, bij een typisch doordeweeks geval, is een oorzaak en een gecontroleerd herstel.

  1. Een specialist op het gebied van het incident, genoemd zodra u in de sessie zit.

  2. Service hersteld, of een duidelijke inperking, als dat mogelijk is met de toegang die we hebben.

  3. Een oorzaak, of een beperkte reeks oorzaken, in gewone taal.

  4. Een opmerking over eventuele oplossingen die niet mogen blijven bestaan.

  5. Een door mensen gecontroleerd herstel, en een vervolg als er nog werk aan de betrouwbaarheid is.

Wat u ons moet sturen als de productie is gestopt

Snelheid is belangrijk. Een paar feiten voorkomen een blinde herstart. Plak geen live wachtwoorden in de chat.

URL's en het tijdstip waarop deze is gestart

Plus de tijdzone.

Wat gebruikers zien

Fouten, blanco pagina's, mislukte aanmeldingen, mislukte betalingen.

De laatste wijziging

Implementatie, DNS, certificaat of cloudgebeurtenis.

Wat je al hebt geprobeerd

Opnieuw opstarten, terugdraaien, opschalen of een mislukte failover.

Hoe we samen met u op het systeem kunnen komen

Een overeengekomen kanaal en geautoriseerde toegang.

Snelle en urgente fixes

Eerste 4 uur met een specialist + onbeperkte AI: gratis, één keer per klant. Verder werk is betaald, op aanvraag. Een mens leidt en controleert het resultaat.

Gratis (eerste sessie)

Complexe projecten

Groter werk heeft een ander tarief, op aanvraag. We zeggen dat voordat we doorgaan.

Op aanvraag

Werkdagen, daarna weekenden

Het basisplan geldt alleen op werkdagen. Weekendwerk is een apart product. Een toeslag wordt vooraf genoemd, vóór elk gesprek, en hangt af van de complexiteit. Bedrag: op aanvraag.

Op aanvraag

De eerste sessie is gratis: de eerste 4 uur met een specialist, plus onbeperkte AI, één keer per klant. Werk daarna, het tarief voor complexe projecten en het weekendtarief zijn betaald, op aanvraag.

Eén gratis sessie per klant: de eerste 4 uur met een specialist, plus onbeperkte AI als hulpmiddel.

Herkent u de situatie? Stuur ons een bericht, we zoeken het uit.

04

Zodat het opgelost blijft

Wat u daarna niet moet doen, welke stacks we in dit werk zien, en hoe de fix blijft zitten.

Wat u niet moet doen tijdens een storing

Beweging is niet hetzelfde als herstel. Sommige zetten maken het volgende uur moeilijker.

Alles opnieuw opstarten voordat u logbestanden vastlegt

Het kan zijn dat u kort herstelt en de oorzaak kwijtraakt.

Een nieuwe gok inzetten bovenop een vastgelopen release

Je kunt het laatste goede artefact kwijtraken.

Debatteren over de perfecte post-mortem terwijl deze nog niet ligt

Eerst herstellen, dan schrijven.

Voor je het weet, publiceer je een gedetailleerde technische theorie in het openbaar

Het kan zijn dat u ongelijk heeft en dat u een pad onthult dat u nog niet hebt afgesloten als dit ook een beveiligingsgebeurtenis is.

De mogelijkheid van een inbreuk wordt genegeerd

Als de site onleesbaar is gemaakt of als er gegevens lekken, raadpleeg dan de gehackte website en beveiligingspagina's en zeg dit zo snel mogelijk.

Waar we de productie zien dalen

Vertel ons de stack en de host. Als we het niet moeten accepteren, zullen we dat zeggen.

Webapps en API's op typische clouds en PaaS

AWS, GCP, Azure en eenvoudigere hosts.

Databases en wachtrijen die de app meenemen

Postgres, MySQL, Redis en jobworkers.

DNS, TLS en load balancers

De rand die eruit kan zien als een applicatiefout.

Releaseplatforms

Een CI/CD-wijziging die tot een storing leidde. Zie ook mislukte implementaties.

Nadat de productie terug is: hoe maak je de volgende uitval korter?

Een herstel is onvolledig als dezelfde beweging je morgen ten val zou brengen.

Right after the fix

Schrijf de tijdlijn terwijl deze nog nieuw is

Oorzaak, oplossing en de blijvende oplossing.

Oefen een terugdraaiactie

Een terugdraaiing die je nog nooit hebt geprobeerd, is hoop.

Voeg de ontbrekende statuscontrole toe aan de gebruikerstaak

Niet alleen op een statische pagina.

Plaats time-outs en schijfalarmen waar ze ontbraken

Saaie cheques.

As you keep shipping

Aparte onomkeerbare gegevenswijzigingen vanaf de eerste implementatie

Wanneer je kunt.

Spreek af wie er gebeld kan worden, en hoe

Een naam en een pad, geen groepschat met vijftig mensen.

Beoordeel de gegenereerde implementatiewijzigingen voordat ze live gaan

Een pijplijn die u niet begrijpt, zal in het openbaar mislukken.

Herkent u de situatie? Stuur ons een bericht, we zoeken het uit.

05

Vragen over dit probleem

Directe antwoorden over dit probleem, de sessie en wat daarna komt.

Moet ik al teruggedraaid zijn?

Als je een bekende laatste goede release hebt en een veilige terugdraaiing, zeg dan wat je al hebt geprobeerd.

Wat als dit een beveiligingsincident is en geen crash?

Zeg dat maar. We zullen het in die volgorde van werk behandelen. Zie ook de pagina's over een gehackte website en over beveiligingslekken.

Kan ik voorrang krijgen in de wachtrij?

Ja. Vraag naar de dringende verhuizing naar positie 1. De startprijs is 99 USD terwijl de wachtrij leeg is en kan later worden herzien.

Hoe begin ik?

Schrijf nu op WhatsApp of Telegram. Geen formulier, geen webchat.

Werk je standaard in het weekend?

Nee. Het basisabonnement is op weekdagen. Weekendwerk is een apart product en eventuele toeslagen worden vooraf, vóór een oproep, vermeld.

Verzin jij een beschikbaarheidspercentage?

Nee. We zullen praten over dit incident en wat we hebben veranderd.

Kun je blijven nadat het terug is?

Wilt u een betrouwbaarheidsopvolging, dan bieden wij het bijpassende tarief en tekenen wij voor dat werk.

Onze statuspagina is nog steeds groen. Betekent dit dat we op zijn?

Niet als de gebruikerstaak niet beschikbaar is. Gezondheidscontroles kunnen naar de verkeerde dingen kijken.

Accepteert u elk support ticket?

Nee. We nemen een hard down-systeem dat een ingenieur nodig heeft, geen helpcentrumscript.

Is de eerste sessie echt gratis?

Ja. Elke klant krijgt één gratis sessie: de eerste 4 uur met een specialist, plus onbeperkte AI als hulpmiddel. De 24-uurslijn is de tijd waarin we een typische zaak op een werkdag binnen scope willen starten en afronden, niet 24 uur onbetaald werk. Verder werk is betaald, op aanvraag.

Human First

De productie ligt plat. We lossen het binnen 24 uur op.

Als de productie al is gestopt, schrijf dan nu op WhatsApp of Telegram. Je gaat met een persoon praten.

Eén gratis sessie per klant: de eerste 4 uur met een specialist, plus onbeperkte AI als hulpmiddel.

Human First

Kies een kanaal

Geen webformulier, geen webchat. Schrijf op WhatsApp of Telegram, een specialist antwoordt. Je bericht is vooraf ingevuld met het probleem en de pagina.

Telegram opent de chat met @brnzai. De tekst wordt vaak niet automatisch geplakt — kopieer hem en stuur hem daar: