InnerWeb
Przejdź do treści

Checklista przeglądu dostawcy: utrzymanie i rozwój

Roczny przegląd dostawcy systemu bezpieczeństwa pozwala sprawdzić, czy utrzymanie i rozwój idą zgodnie z umową. Checklista obejmuje testy, kontrolę zmian, monitoring błędów, zgłoszenia i rozwój funkcji, a komentarz przy każdej grupie wyjaśnia, jakiego dowodu zażądać.

242
testów E2E w pakiecie
5 000
błędów miesięcznie w budżecie wspólnym
2
rundy kontroli zmian

Cel i przygotowanie przeglądu

Przegląd dostawcy powinien odpowiedzieć na jedno pytanie: czy zakład ma dowody, że system jest utrzymywany i rozwijany w sposób kontrolowany. Do przeglądu warto zaprosić dział IT, kierownika BHP i zakupy, bo każda z tych ról patrzy na inny obszar.

Przed spotkaniem poproś dostawcę o trzy dokumenty: listę wydań z numerami wersji, listę zgłoszeń z czasami reakcji i wynik ostatniego pełnego przebiegu testów. System jest oferowany w subskrypcji z jednorazowym kosztem wdrożenia, więc przegląd jest też dobrą okazją, żeby porównać zakres usług w abonamencie z faktycznie wykorzystanym.

Testy i odbiory

Pierwsza grupa dotyczy tego, jak dostawca sprawdza swoje oprogramowanie. Pakiet testów przeglądarkowych E2E obejmuje 242 testy w 31 plikach i uruchamia prawdziwą przeglądarkę Chromium na prawdziwym backendzie. Zakład powinien zapytać, ile testów jest teraz w pakiecie, kiedy był ostatni pełny przebieg i jaki był wynik.

Pełny zestaw trwa około 2–2,5 godziny i uruchamia się ręcznie na żądanie oraz automatycznie w weekendy o północy. Poproś o historię przebiegów z ostatnich miesięcy: regularność uruchomień mówi więcej o dyscyplinie dostawcy niż pojedynczy zielony wynik.

Znane błędy i testy regresji

Znany, jeszcze nienaprawiony błąd jest oznaczany w teście jako oczekiwane niepowodzenie z numerem zgłoszenia, nigdy pominięciem testu. Poproś o listę takich adnotacji: jej długość i wiek pokazują, jak szybko dostawca usuwa znane problemy.

Liczby do porównania w przeglądzie

Liczby do porównania w przeglądzieWykres słupkowy: 242 testy E2E, 31 plików testów i limit 21 zdarzeń na godzinę na rodzaj błędu.050100150200250wartośćTesty E2E: 242 wartość242Testy E2EPliki testów: 31 wartość31Pliki testówLimit zdarzeń na godzinę na rodzaj błędu: 21 wartość21Limit zdarzeń na godzinę narodzaj błędu
Źródło: i

Kontrola zmian

Druga grupa dotyczy ścieżki od zmiany do wydania. Każda zmiana w repozytorium przechodzi analizę statyczną, kontrolę stylu i testy jednostkowe, a scalenie jest zablokowane do zielonego wyniku. Zapytaj, czy ta zasada obowiązuje bez wyjątków i jak dostawca dokumentuje wyjątki, jeśli się zdarzają.

Dokumentacja opisuje też niezależnego agenta kontroli, który ocenia zgodność zmiany z opisem i regułami domenowymi, z trzema klasami uwag (blokujące, ostrzeżenia ważone, sugestie) i limitem dwóch rund. Mechanizm ten jest opisany jako zaprojektowany i zbudowany, ale w stanie z sierpnia 2026 jeszcze niewdrożony produkcyjnie, więc zapytaj dostawcę o jego aktualny stan zamiast zakładać, że działa.

Monitoring błędów i zgłoszenia

Trzecia grupa dotyczy tego, co dostawca widzi po wdrożeniu. Wszystkie instancje zgłaszają niewychwycone wyjątki do jednego projektu monitoringu błędów, a miesięczny budżet 5 000 błędów jest zasobem wspólnym. Zapytaj, jak dostawca pilnuje tego budżetu i co robi, gdy jedna instancja generuje nadmiar zdarzeń.

Limit zdarzeń błędów wynosi 21 na godzinę na rodzaj błędu. W dni bez incydentów najgorszy dzień dał 305 zdarzeń (ok. 12,7 na godzinę), a awaria pętli osiągnęła 180 na godzinę. Poproś o dane z ostatniego roku: liczba dni z przekroczeniem limitu i sposób obsługi każdego z nich.

Przejrzyj listę zgłoszeń zakładu: czasy reakcji, czasy rozwiązania i powtarzające się tematy. Powtarzający się temat to sygnał, że warto zamówić poprawkę u źródła, a nie obsługiwać go zgłoszeniami.

Rozwój funkcji i podsumowanie

Czwarta grupa dotyczy nowych funkcji. Sprawdź, które zamówienia z ostatniego roku zostały wdrożone, w jakiej wersji i z jakim wynikiem testów. Zapytaj, jak dostawca ocenia ryzyko kolejnych zmian i co planuje w następnym roku.

Na koniec porównaj koszt z wartością: abonament, utrzymanie nadajników, wynajem urządzeń mobilnych i rozwój. Zapisz wnioski z przeglądu: co dostawca ma poprawić, do kiedy i kto z zakładu to sprawdzi. Aktualizacja po stronie InnerWeb nie wymienia czytników ani kart klienta, więc w przeglądzie nie szukaj kosztów sprzętu kontroli dostępu związanych z oprogramowaniem.

Lista kontrolna

Materiał wideo

Często zadawane pytania

Jak często robić przegląd dostawcy?

Raz w roku, a po poważnej awarii dodatkowo. Roczny rytm pasuje do rozliczenia abonamentu i planowania rozwoju.

Kto powinien uczestniczyć w przeglądzie?

Dział IT, kierownik BHP i zakupy. IT ocenia testy i monitoring, BHP funkcje i alarmy, zakupy koszty i umowę.

Czy dostawca musi udostępnić wyniki testów?

Warto wpisać taki obowiązek do umowy. Wynik pełnego przebiegu E2E jest podstawowym dowodem utrzymania jakości.

Przejdź przegląd z nami

Chętnie przejdziemy z Wami roczny przegląd: testy, zmiany, błędy i rozwój. Umów rozmowę z InnerWeb.

Porozmawiajmy