Z czego składa się stos systemu
Lokalny stos systemu składa się z serwera pośredniczącego z TLS, aplikacji PHP 8.4 z Apache, bazy MySQL 8.0, magazynu zgodnego z S3, Redis, łapacza poczty, usługi generowania PDF i usługi pomocniczej .NET. Dane leżą w nazwanych wolumenach. Instalacja produkcyjna w zakładzie ma ten sam podział, z zastrzeżeniem, że łapacz poczty jest narzędziem środowiska testowego.
Rekomendacje poniżej porządkują, co zrobić z każdym elementem przy pierwszym wdrożeniu i co dodać do monitoringu zakładu.
Zalecenie 1: bazę kopiuj i monitoruj jako osobną usługę
Baza MySQL 8.0 przechowuje osoby, zezwolenia, kwalifikacje i zdarzenia. To najcenniejszy element stosu, więc dostaje własny harmonogram kopii, własny test odtworzenia i własne alarmy: miejsce na dysku, liczba połączeń, opóźnienie odpowiedzi. Kopia logiczna lub fizyczna zależy od standardu zakładu, ale odtworzenie trzeba próbować regularnie na preprodukcji.
Przy aktualizacji bazy lub aplikacji należy pamiętać o migracjach, o których piszemy na osobnej stronie. Ich czas zależy od historii instalacji.
Przykładowy podział priorytetu kopii i alarmów
Zalecenie 2: Redis traktuj jako cache z konsekwencjami
Redis 8.6 w stosie służy jako szybka warstwa pomocnicza. Administrator powinien ustalić, które dane są w nim wyłącznie tymczasowe, a które wymagają trwałości. Do monitoringu należą: zajęta pamięć, liczba połączeń i polityka wygaszania kluczy.
Wyczerpanie pamięci Redis daje objawy, które łatwo pomylić z błędem aplikacji. Dlatego w alarmach warto mieć osobny próg dla tej usługi, zamiast liczyć na ogólny stan hosta.
Zalecenie 3: magazyn zgodny z S3 kopiuj niezależnie od bazy
Pliki, takie jak zdjęcia, załączniki, wydruki i materiały szkoleniowe, leżą w magazynie zgodnym z S3, a nie w bazie. Kopia bazy nie obejmuje więc plików. Odtworzenie systemu wymaga obu kopii z zachowaną spójnością w czasie: baza wskazuje obiekty, które muszą istnieć w magazynie.
Zalecamy, aby harmonogram kopii bazy i magazynu był ustawiony w tym samym oknie, a w opisie instalacji zapisano kolejność odtwarzania.
Zalecenie 4: generator PDF monitoruj pod kątem czasu odpowiedzi
Usługa generowania PDF jest odpowiedzialna za wydruki zezwoleń, przepustek i raportów. Jej awaria nie zatrzymuje całego systemu, ale zatrzymuje wydawanie dokumentów, co dla działu BHP bywa równie dotkliwe. Mierz czas generowania typowego dokumentu i ustaw alarm, gdy rośnie ponad ustaloną normę.
Przy pierwszym wdrożeniu zrób próbny wydruk każdego typu dokumentu na preprodukcji i zachowaj wzór jako punkt odniesienia.
Zalecenie 5: usługa pomocnicza .NET i poczta mają własne przypadki
Usługa pomocnicza .NET realizuje wyspecjalizowane zadania i powinna mieć własny wpis w monitoringu, nawet jeśli jej obciążenie jest małe. Poczta w środowisku testowym trafia do łapacza, więc nikt nie dostaje wiadomości z preprodukcji. Na produkcji trzeba ustawić właściwy serwer pocztowy zakładu i sprawdzić dostarczanie powiadomień.
Zalecenie 6: limity pamięci i kolejność startu
Na jednym hoście usługi konkurują o pamięć. Ustaw limity dla kontenerów i kolejność startu: baza i Redis przed aplikacją. Po restarcie serwera aplikacja nie powinna wystartować przed gotowością bazy. Zapisz w opisie instalacji, w jakiej kolejności administrator uruchamia usługi po awarii zasilania.
Dane są przechowywane w nazwanych wolumenach, więc ponowne uruchomienie kontenerów nie niszczy zawartości. Dane i kopie zapasowe pozostają na dyskach zamawiającego.
Materiał wideo
Często zadawane pytania
Czy kopia bazy wystarczy do odtworzenia systemu?
Nie. Pliki są w magazynie zgodnym z S3, więc potrzebna jest kopia obu elementów oraz konfiguracji. Odtwarzanie ćwiczy się na preprodukcji.
Czy Redis wymaga kopii?
To zależy od tego, które dane w nim trzymamy. Administrator powinien ustalić, co jest tymczasowe, a co wymaga trwałości, i zapisać decyzję.
Co zrobić, gdy nie działa generowanie PDF?
Sprawdź usługę generowania PDF osobno od aplikacji. Jej awaria zatrzymuje wydruki, nie cały system.
Czy łapacz poczty działa na produkcji?
Nie. To element środowiska testowego, który zbiera wiadomości, żeby nie trafiły do prawdziwych odbiorców. Produkcja używa serwera pocztowego zakładu.
Źródła
Zróbmy listę usług do monitoringu
Przygotujemy z administratorem zakładu plan kopii i alarmów dla każdej usługi stosu przed pierwszym uruchomieniem.
Porozmawiajmy