InnerWeb
Przejdź do treści

Dobre praktyki retencji telemetrii lokalizacji

Telemetria pulsów urządzeń nie ma domyślnej retencji: mechanizm czyszczenia istnieje, ale jest wyłączony do czasu decyzji klienta o długości przechowywania historii. Bez tej decyzji tabela rośnie bez końca. Opisujemy, kto ma ją podjąć przed pierwszym wdrożeniem i jakie praktyki pomagają ją uzasadnić.

26 s
przykładowy interwał heartbeatu przyjęty do kalkulacji
Źródło: karta
ok. 606 mln
pulsów rocznie dla 500 urządzeń, kalkulacja przykładowa
Źródło: kalkulacja przykładowa

Dlaczego retencja to decyzja klienta, a nie ustawienie domyślne

Okres przechowywania historii lokalizacji dotyka kilku obszarów jednocześnie: bezpieczeństwa pracy, ochrony danych osobowych, kosztu infrastruktury i dowodów po incydentach. Dostawca systemu nie może w imieniu zakładu zdecydować, który z tych interesów ma pierwszeństwo. Dlatego mechanizm czyszczenia pulsów jest przygotowany, ale pozostaje wyłączony do czasu decyzji klienta.

Skutek braku decyzji jest przewidywalny: tabela pulsów rośnie z każdym heartbeatem. Po dwóch latach pracy może liczyć dziesiątki milionów rekordów, co wpływa na wydajność zapytań i koszt przechowywania.

Praktyka 1: wyznacz właściciela decyzji przed pierwszym wdrożeniem

Decyzję powinien podjąć zespół złożony z kierownika BHP, inspektora ochrony danych lub osoby w tej roli oraz przedstawiciela IT. Kierownik BHP wskazuje, jak długo historia jest potrzebna do analizy incydentów. Inspektor ochrony danych ocenia, jak długo można przechowywać dane lokalizacji pracowników. IT przedstawia koszt przechowywania i wpływ na wydajność.

Wynikiem spotkania jest jedna liczba: okres przechowywania pulsów w dniach lub miesiącach, zapisana w dokumentacji zakładu.

Narastanie tabeli pulsów bez retencji (500 urządzeń)

Narastanie tabeli pulsów bez retencji (500 urządzeń)Wykres liniowy: tabela pulsów rośnie liniowo do około 606 mln rekordów po roku i 1212 mln po dwóch latach.025050075010001250mln rekordówMiesiąc 3Miesiąc 6Miesiąc 12Miesiąc 24Miesiąc 3: 150 mln rekordów150Miesiąc 6: 303 mln rekordów303Miesiąc 12: 606 mln rekordów606Miesiąc 24: 1212 mln rekordów1212
Źródło: Kalkulacja przykładowa: 500 urządzeń, heartbeat co 26 s, ok. 1,66 mln pulsów dziennie

Praktyka 2: rozdziel okres przechowywania dla różnych danych

Nie wszystkie dane telemetrii mają tę samą wartość. Surowe pulsy, które powstają co kilkadziesiąt sekund, rosną najszybciej i najszybciej tracą wartość analityczną. Dziennik zdarzeń urządzenia i zapisy dotyczące alarmów mają dużo większą wartość dowodową i zwykle powinny być przechowywane dłużej.

Zalecamy zapisać w polityce co najmniej dwa okresy: krótszy dla surowych pulsów i dłuższy dla zdarzeń bezpieczeństwa. Przykładowe okresy wymagają uzasadnienia w analizie ryzyka konkretnego zakładu.

  • Surowe pulsy lokalizacji: okres krótszy, wynikający z potrzeb analizy bieżącej.
  • Zdarzenia bezpieczeństwa (alarm, bezruch, SOS): okres dłuższy, zgodny z procedurą powypadkową.
  • Dziennik urządzenia: okres wystarczający do rozliczenia incydentu i kontroli.

Praktyka 3: policz przyrost danych przed decyzją

Decyzję o retencji dobrze jest oprzeć na liczbach. Kalkulacja przykładowa: przy założeniu 500 urządzeń i heartbeacie co 26 s każde urządzenie wysyła około 3 323 pulsy na dobę (86 400 s podzielone przez 26 s), a cała flota około 1,66 mln pulsów dziennie. W ciągu roku daje to ok. 606 mln rekordów.

Taki wynik pokazuje, że bez czyszczenia tabela osiągnie skalę, w której nawet poprawnie zaindeksowane zapytania zaczynają kosztować. Liczby zależą od liczby urządzeń i interwału, dlatego każdy zakład powinien policzyć własne.

Praktyka 4: włącz czyszczenie świadomie i przetestuj je

Po podjęciu decyzji należy włączyć mechanizm czyszczenia z wybraną wartością okresu. Pierwsze uruchomienie na dużej tabeli może usuwać miliony rekordów, więc warto je wykonać w czasie mniejszego ruchu, po wykonaniu kopii zapasowej, i obserwować obciążenie bazy. Usuwanie danych bez kopii jest operacją, której nie należy wykonywać pochopnie.

Po uruchomieniu sprawdź, czy kolejne czyszczenia działają cyklicznie i czy rozmiar tabeli się stabilizuje.

Praktyka 5: dokumentuj i przeglądaj okres co rok

Okres retencji nie jest decyzją na zawsze. Zmieniają się przepisy, liczba urządzeń i wymagania audytorów. Zapisz datę decyzji, osoby odpowiedzialne i uzasadnienie, a raz w roku zaplanuj przegląd. Dokument ten jest dowodem do audytu, że przechowywanie danych jest przemyślane.

Kalkulacja przykładowa

Przyrost pulsów dla floty urządzeń

Założenia
ParametrWartość
Liczba urządzeń500 sztuk
Interwał heartbeatu26 s

Wynik: Ok. 3 323 pulsów na urządzenie dziennie, ok. 1,66 mln dla floty, ok. 606 mln rocznie.

Uwaga: Kalkulacja przykładowa na założonych wartościach; faktyczny przyrost zależy od liczby urządzeń, interwału i czasu pracy.

Lista kontrolna

Materiał wideo

Często zadawane pytania

Czy system domyślnie usuwa stare pulsy?

Nie. Mechanizm czyszczenia istnieje, ale jest wyłączony do czasu decyzji klienta o długości przechowywania.

Kto powinien zdecydować o okresie retencji?

Zespół złożony z kierownika BHP, osoby odpowiedzialnej za ochronę danych i przedstawiciela IT, przed pierwszym wdrożeniem.

Czy wszystkie dane telemetrii trzeba trzymać tak samo długo?

Nie. Surowe pulsy rosną najszybciej i mają najkrótszą wartość analityczną, a zdarzenia bezpieczeństwa warto przechowywać dłużej.

Ustalmy retencję przed wdrożeniem

Pomożemy przygotować kalkulację przyrostu danych i propozycję okresów przechowywania do decyzji Waszego zespołu.

Porozmawiajmy