Apibūdinkite sunkiausią produkcinį incidentą ir pirmąsias 30 minučių.

Question

IT Interview Practice · Accepted Answer

**Stiprus atsakymas parodo, kaip mažinote žalą klientams, sprendėte turėdami nepilnus įrodymus ir užkirtote kelią pasikartojimui.** Aiškiai apibūdinkite savo vaidmenį, nepriskirdami sau viso komandos darbo.

Naudokite tikrai patirtą incidentą. Toliau pateiktas scenarijus išgalvotas ir iliustruoja struktūrą; pokalbyje pakeiskite jį savo veiksmais ir patikrintais rezultatais. Laiko intervalai pavyzdiniai, ne universali reakcijos norma.

## 1. Pristatykite situaciją ir atsakomybę

Tarkime, buvau budintis serverio dalies vadovas, kai netrukus po leidimo padaugėjo pirkimo klaidų. Klientai naršė, bet dalis negalėjo baigti užsakymų. Laiko sutapimas pavertė leidimą hipoteze, ne įrodyta priežastimi.

Paaiškinčiau atsakomybę: koordinuoti techninį atkūrimą, paskirstyti tyrimą ir informuoti incidento vadovą. Jei pats vadovavau incidentui, tai pasakyčiau ir deleguočiau komunikaciją arba praktinį tyrimą, kad netapčiau kliūtimi.

## 2. Pirmos penkios minutės: patvirtinkite poveikį ir organizuokite reakciją

Patikrinkite pirkimo klaidas, delsą ir sėkmingus užsakymus, kad nustatytumėte paveiktus klientus bei tęstinumą. Atidarykite vieną kanalą, paskirkite roles, sustabdykite nesusijusius pokyčius ir pradėkite veiksmų bei pastebėjimų laiko juostą.

Priežastis praktiška: keli nepriklausomai keičiantys žmonės gali užmaskuoti priežastį ar pabloginti padėtį. Atnaujinime atskirkite faktus nuo hipotezių ir nurodykite kitą informavimo laiką. Žr. Google [incidentų valdymo gaires](https://sre.google/workbook/incident-response/).

## 3. Kitos dešimt minučių: pasirinkite saugų žalos mažinimą

Tarkime, tyrimas randa išnaudotas bazės jungtis, o leidimas pridėjo brangų ataskaitos kelią. Palyginčiau grąžinimą su laikinu jo išjungimu išlaikant pirkimą.

- Patikrinkite grąžinimo suderinamumą su jau pakeista schema ar duomenimis. Ankstesnė programa nėra automatiškai saugi dabartinei bazei.
- Jei išbandytas jungiklis gali išjungti nebūtinas ataskaitas, sumažinkite apkrovą ir stebėkite pirkimo pagerėjimą.
- Vienam žmogui skirkite jungčių tyrimą, kitam atkūrimo patikrą, kad tyrimas tęstųsi nestabdydamas pagrįsto žalos mažinimo.

Sprendimas turi sekti turimus įrodymus ir grįžtamumą. Nelaukčiau visiško priežasties tikrumo, kol klientai užblokuoti, bet užrašyčiau, kodėl pasirinktas veiksmas turėtų padėti.

## 4. Iki trisdešimties minučių: patvirtinkite naudingo veikimo atkūrimą

Krintančio CPU grafiko neužtenka. Patvirtinkite realius sėkmingus pirkimus, priimtiną delsą ir mažėjančią eilę be naujo spaudimo. Stebėkite po pakeitimo, o ne skelbkite atkūrimą po vienos sėkmės.

Neaiškius mokėjimus sutikrinkite prieš kartodami nurašymą. Laukimo klaida gali slėpti baigtą mokėjimą. Praneškite, kas atkurta, kas neaišku ir ką klientams daryti, neišgalvodami įrodymais nepagrįsto atkūrimo laiko.

## 5. Po atkūrimo: pakeiskite gedimą leidusias sąlygas

Šiame išgalvotame pavyzdyje gali paaiškėti, kad ataskaitos ir pirkimas dalijosi jungtimis, o ataskaitos neturėjo veiksmingo limito. Tolesnis darbas turi taisyti mechanizmą, ne baigtis „būkime atsargesni“.

- Apribokite ataskaitų darbą ir lygiagretumą, kad viena funkcija neišnaudotų viso bendro ištekliaus.
- Kur reikia, vertinkite izoliaciją ir bandykite ataskaitas kartu su pirkimu reprezentatyvia apkrova.
- Įspėkite pagal pirkimo sėkmę ir delsą bei repetuokite mažinimo ar grąžinimo procedūrą.
- Kiekvienai pataisai skirkite atsakingą žmogų, terminą ir užbaigimo patikrą.

Tikrame pokalbyje užbaikite faktiniu atkūrimu ir vėlesnių testų ar veikimo įrodymais. Jei matavimo nėra, taip pasakykite, užuot pateikę įspūdingą skaičių. Pamoka turi tiesiogiai sietis su pakeitimu, kurį padėjote įgyvendinti ir patikrinti.

1. Pristatykite situaciją ir atsakomybę

2. Pirmos penkios minutės: patvirtinkite poveikį ir organizuokite reakciją

3. Kitos dešimt minučių: pasirinkite saugų žalos mažinimą

4. Iki trisdešimties minučių: patvirtinkite naudingo veikimo atkūrimą

5. Po atkūrimo: pakeiskite gedimą leidusias sąlygas

Susiję klausimai