Etap 1: jeden wspólny projekt raportowania
Raportowanie błędów trafia do jednego wspólnego projektu Sentry. Dla zakładu oznacza to, że zdarzenia z instancji są oglądane w jednym miejscu przez zespół dostawcy, a dział IT zakładu nie musi utrzymywać własnego odbiorcy. W razie wymagań polityki bezpieczeństwa, które zabraniają wysyłki do zewnątrz, trzeba to ustalić na początku.
Zapytaj działu IT o politykę ruchu wychodzącego. Jeżeli sieć blokuje cały ruch wychodzący z hosta aplikacji, raportowanie nie wyjdzie, a to samo dotyczy webhooków. W takiej sieci webhooki alarmowe zapisują się trwale, a zewnętrzny poller odbiera je kanałem przychodzącym.
Etap 2: limity zdarzeń, aby nie zalać skrzynki
Limit po stronie kodu wynosi 21 zdarzeń na godzinę na rodzaj błędu oraz łącznie 89 na godzinę na instancję dla wpisów logu. Zapobiega to sytuacji, w której jedna usterka powtarzana tysiące razy zasypuje odbiorcę i zespół.
Dla IT zakładu wniosek jest praktyczny: liczba powiadomień zależy od liczby różnych rodzajów błędów, a nie od liczby powtórzeń jednego. Jeśli dostajecie wiele alertów, to znaczy, że dzieje się wiele różnych rzeczy, a nie że system powtarza jedną.
Limity raportowania na godzinę
Punkt kontrolny 1: alarmy bezpieczeństwa nie są wyciszane
Limity zdarzeń dotyczą powtarzalnych błędów aplikacji. Alarmy bezpieczeństwa nie są wyciszane: trafiają do odbiorcy niezależnie od limitu, bo ich pominięcie byłoby groźniejsze niż nadmiar powiadomień.
Dla IT zakładu wniosek jest praktyczny: ustal osobną skrzynkę lub kanał dla alarmów bezpieczeństwa i wskaż osobę, która odpowiada za reakcję. Alarm bezpieczeństwa wymaga decyzji w ciągu dnia roboczego, a nie archiwizacji.
Punkt kontrolny 2: synchroniczny transport i niedostępny odbiorca
Transport Sentry jest synchroniczny, więc ustawiono limit 1 sekundy na połączenie i 2 sekundy na odpowiedź. Dzięki temu niedostępny odbiorca nie wydłuża obsługi każdego błędu. Bez takiego limitu użytkownik czekałby na odpowiedź serwera tak długo, jak długo odbiorca raportu nie odpowiada.
W najgorszym przypadku błąd użytkownika obsłuży się o 3 sekundy dłużej, czyli o sumę limitów połączenia i odpowiedzi. To rząd wielkości, który użytkownik zauważy, ale który nie zablokuje systemu.
Limity czasu transportu
Etap 3: wersja wydania jako skrót commitu
Wersja wydania w raportach błędów jest skrótem commitu wdrożonego obrazu, taką samą jak znacznik obrazu w rejestrze. Dzięki temu administrator łączy zgłoszenie z dokładną wersją kodu na instancji i z konkretnym obrazem kontenera.
Przy analizie błędu po aktualizacji sprawdź najpierw, czy wersja wydania w raporcie zgadza się z wersją uruchomioną na instancji. Różnica oznacza, że część ruchu wciąż obsługuje stary obraz.
Przy odbiorze monitoringu warto spisać w protokole trzy ustalenia: kto odbiera powiadomienia zwykłe, kto odbiera alarmy bezpieczeństwa i jak wygląda zastępstwo na czas urlopów. Zespół dostawcy i dział IT zakładu powinni znać te same zasady, aby po pierwszym alarmie nie tracić czasu na ustalanie, do kogo on trafia. Warto też raz na kwartał przejrzeć listę odbiorców i rodzajów błędów, które faktycznie wymagały reakcji, i usunąć z niej te, które nikomu nie były potrzebne.
- Uzgodnij politykę ruchu wychodzącego do odbiorcy raportów.
- Ustal, kto w IT dostaje powiadomienia i w jakiej skrzynce.
- Po aktualizacji porównaj wersję wydania z uruchomionym obrazem.
- Nie przeciążaj skrzynki: wybierz rodzaje błędów, które wymagają reakcji.
Materiał wideo
Często zadawane pytania
Czy awaria odbiorcy raportów zatrzyma system?
Nie. Ustawiono limit 1 sekundy na połączenie i 2 sekundy na odpowiedź, więc najwyżej wydłuży obsługę błędu o kilka sekund.
Czy limit zdarzeń wycisza alarmy bezpieczeństwa?
Nie. Limit dotyczy powtarzalnych błędów aplikacji, a alarmy bezpieczeństwa nie są wyciszane.
Skąd wiem, jaka wersja kodu zgłosiła błąd?
Wersja wydania w raporcie to skrót commitu wdrożonego obrazu, taki sam jak znacznik obrazu w rejestrze.
Ustawmy monitoring bez zalewu alertów
Uzgodnimy z Waszym IT politykę ruchu wychodzącego i odbiorców powiadomień, aby alerty były tylko tam, gdzie wymagają reakcji.
Porozmawiajmy