InfraNestInfraNest
Incidenten

Incidenten

Wanneer een controle écht faalt, opent InfraNest een incident — een bijgehouden registratie van de storing — en sluit dit automatisch zodra de dienst herstelt.

Incidenten vormen InfraNests registratie van echte storingen — automatisch aangemaakt voor jou, en voor iedereen in je team die moet weten wat er kapot was, wanneer, en hoe lang.

Overzicht

  • Wanneer een controle écht faalt, opent InfraNest een incident met de impact en oorzaak, en houdt bij hoe lang het duurt.
  • Incidenten sluiten zichzelf automatisch zodra de dienst herstelt.
  • Je kunt een incident bevestigen, notities achterlaten voor je team, en statusupdates plaatsen voor je klanten — allemaal vanaf dezelfde plek.

Hoe incidenten werken

  1. Een bevestigde storing opent een incident, waarbij de impact, oorzaak en duur worden vastgelegd.
  2. Je kunt op Bevestigen drukken bij het incident zodat je team weet dat iemand ermee bezig is — dit stopt de herhaalde meldingen. Bevestigen werkt op elk abonnement.
  3. Plaats updates op de tijdlijn van het incident naarmate de situatie zich ontwikkelt; het plaatsen van updates maakt deel uit van incidentbeheer.
  4. Voeg een notitie toe voor het team — bijvoorbeeld "database wordt herstart, terug over 5 minuten". Notities zijn alleen voor je team: ze worden getoond bij het incident, in de bel en in PagerDuty, maar nooit op je statuspagina. Je kunt een notitie toevoegen:
    • Bij het incident zelf
    • Vanuit de bel, zodra het incident is bevestigd
    • Direct na het drukken op Bevestigen in een e-mailmelding
    • In Telegram, door op Add a note te drukken onder de melding, of door simpelweg op de melding te reageren
  5. Om je klanten te laten weten wat er aan de hand is, plaats je een statusupdate in plaats van een notitie. Na het bevestigen vanuit een e-mail brengt Post a status update je direct naar het invoerveld hiervoor, wanneer de monitor op een van je statuspagina's staat.
  6. Zodra de controle herstelt, wordt het incident automatisch opgelost — er is geen actie nodig.
  7. Incidenten die worden veroorzaakt door gepland onderhoud worden als gepland gemarkeerd, zodat ze niet meetellen als onverwachte downtime.

Voorkom meldingsstormen met afhankelijkheden

  1. Als één storing ervoor zou zorgen dat meerdere controles tegelijk falen, stel dan de getroffen controle in als afhankelijk van de controle die daadwerkelijk faalt.
  2. Wanneer de bovenliggende controle down is, worden de meldingen van de onderliggende controles onderdrukt.
  3. Dit maakt van wat tien aparte incidenten zouden zijn, één incident.

Wat je te horen krijgt

  • Je ontvangt een e-mail wanneer iets uitvalt, en nog een wanneer het weer werkt. De tweede e-mail vertelt je hoe lang het uitgevallen was en hoe snel het nu reageert.
  • Voor een monitor die steeds uitvalt en weer terugkomt, worden deze "instabiel" en "weer stabiel" genoemd (zie hieronder).
  • Het "weer online"-bericht wordt altijd verzonden — zelfs naar bestemmingen die zijn ingesteld op alleen kritieke meldingen, en zelfs buiten hun rustperiodes. Als een bestemming op de hoogte werd gebracht van de storing, wordt deze ook op de hoogte gebracht wanneer de storing voorbij is.
  • Beide e-mails bevatten een link View incident die dat specifieke incident opent, met zijn tijdlijn en opmerkingenveld, ongeacht hoe oud het is.

Een monitor begrijpen die steeds uitvalt en weer terugkomt

Sommige dingen falen niet netjes — een onbetrouwbare upstream-dienst of een overbelaste server kan uitvallen, terugkomen en weer uitvallen, herhaaldelijk. In plaats van voor elke korte storing een "down"- en "weer online"-bericht te sturen, behandelt InfraNest dit als één doorlopend probleem:

  1. De eerste twee storingen worden gemeld zoals gebruikelijk. Het tweede bericht vermeldt dit: "Dat zijn 2 storingen in de afgelopen 15 minuten."
  2. De derde storing binnen een uur stuurt één gecombineerd bericht — bijvoorbeeld "Review-endpoint blijft uitvallen en terugkomen — 3 storingen in 40 minuten" — met een overzicht van elke storing. Het gaat naar elke bestemming, en er blijft één PagerDuty-incident open.
  3. Daarna blijft InfraNest stil terwijl de monitor blijft wisselen. Elke korte storing wordt nog steeds vastgelegd op de tijdlijn van hetzelfde incident, zodat niets verloren gaat.
  4. Zodra de monitor een uur lang actief is geweest, ontvang je één bericht "weer stabiel" met de totalen: aantal storingen, totale downtime en de langste storing. Het PagerDuty-incident wordt opgelost.
  5. Als de monitor langer dan 10 minuten down blijft terwijl deze instabiel is, word je direct op de hoogte gebracht, als een normale storing — instabiel zijn verbergt nooit een echte fout.

De berichten "blijft uitvallen" en "weer stabiel" kunnen ook een oplossing voorstellen, wanneer de storingen daarop wijzen:

  • Het valt elke dag rond hetzelfde tijdstip uit: een knop opent een dagelijks onderhoudsvenster, al vooringevuld.
  • De storingen zijn korter dan een paar controles: er wordt een getal voorgesteld voor Failed checks before alerting — bijvoorbeeld "Als 3 mislukte controles in plaats van 2 vereist waren, zouden 20 van deze 22 storingen zijn genegeerd" — en legt de kosten uit: een echte storing zou dan één of twee minuten later worden gemeld. De knop opent de instellingen van de monitor met dat getal al ingevuld en gemarkeerd.

NoteEr verandert niets totdat je opslaat. Als geen van beide suggesties past, wordt er geen getoond.

Incidenten bekijken en filteren

  1. Open Incidents in de zijbalk.
  2. Gebruik Filteren om de lijst te beperken tot open, bevestigde of opgeloste incidenten.
  3. Selecteer een incident om de volledige tijdlijn te openen.

TipWanneer je via de link View incident in een e-mailmelding binnenkomt, zie je alleen dat ene incident, met een melding bovenaan. Druk op Show all incidents om terug te keren naar de volledige lijst.

Incidenten (1)
Incidenten (2)

Begin in seconden

Breng je hele infrastructuur samen in één modern dashboard.

Gratis plan · Geen creditcard nodig · In enkele minuten ingesteld