Monitoring infrastruktury IT: jak wykryć problem, zanim zauważą go użytkownicy

„Od rana nie działa drukowanie faktur”. Tak zwykle dział IT dowiaduje się o problemie, który zaczął się kilka dni wcześniej, gdy dysk na serwerze zaczął się zapełniać. Monitoring infrastruktury IT odwraca tę kolejność: system sam sprawdza stan serwerów, sieci i usług i ostrzega, zanim ktokolwiek zadzwoni. Poniżej opisujemy, co monitorować w firmie MŚP, jak ustawić alerty i jakich błędów unikać.

Dlaczego bez monitoringu awarie zawsze zaskakują

Większość awarii nie przychodzi nagle. Dysk w macierzy zgłasza błędy tygodniami, kopia zapasowa nie wykonuje się od kilku nocy, certyfikat strony wygasa w znanym terminie, a pamięć serwera kończy się stopniowo. Bez monitoringu te sygnały giną w logach, których nikt nie czyta.

Monitoring nie zapobiegnie wszystkim problemom, ale skraca czas od ich pojawienia się do reakcji. Często daje też szansę naprawić usterkę po godzinach, zanim odbije się na pracy zespołu.

Co monitorować w infrastrukturze IT: lista dla firmy MŚP

Serwery i maszyny wirtualne

• dostępność (czy serwer odpowiada),
• zajętość dysków i tempo jej wzrostu,
• obciążenie procesora i pamięci w dłuższym okresie,
• stan dysków fizycznych i macierzy RAID,
• temperatura i stan zasilaczy (jeśli sprzęt to udostępnia),
• działanie najważniejszych usług: bazy danych, serwera plików, kontrolera domeny, serwera aplikacji ERP.

Sieć

• dostępność łącza internetowego i zapasowego,
• stan routera, przełączników i punktów dostępowych Wi-Fi,
• obciążenie łącza w godzinach pracy,
• działanie VPN dla pracowników zdalnych.

Kopie zapasowe i bezpieczeństwo

• wynik każdego zadania kopii (sukces, ostrzeżenie, błąd),
• wiek ostatniej poprawnej kopii,
• alerty z oprogramowania antywirusowego lub EDR,
• nieudane próby logowania i blokady kont,
• terminy wygaśnięcia certyfikatów, domen i licencji.

Zasilanie i środowisko

• praca UPS na baterii, stan baterii,
• temperatura w szafie lub pomieszczeniu serwerowym.

Tej listy nie trzeba wdrażać od razu w całości. Zacznij od tego, co najczęściej powoduje przestoje: dysków, kopii zapasowych, łącza internetowego i najważniejszych usług.

Alerty, które pomagają, a nie przeszkadzają

Monitoring najczęściej przegrywa z nadmiarem powiadomień. Gdy skrzynka zapełnia się dziesiątkami alertów dziennie, ludzie przestają je czytać i przeoczają ten jeden ważny.

1. Ustal progi z zapasem czasu. Ostrzeżenie o zajętości dysku powinno przyjść na poziomie, który zostawia kilka dni na reakcję, a alarm krytyczny dopiero wtedy, gdy praca jest zagrożona.
2. Rozróżnij poziomy. Ostrzeżenia trafiają do zgłoszeń w helpdesku, alarmy krytyczne SMS-em lub w aplikacji do osoby dyżurnej.
3. Nie alarmuj o chwilowych skokach. Krótkie obciążenie procesora przy nocnej kopii to norma. Alert ma sens, gdy wartość utrzymuje się dłużej.
4. Grupuj zależności. Gdy padnie router, nie potrzebujesz dwudziestu alertów o niedostępności każdego urządzenia za nim.
5. Każdy alert ma właściciela. Wiadomo, kto reaguje i w jakim czasie, najlepiej zgodnie z umową SLA na obsługę IT.

Najczęstsze błędy przy monitoringu infrastruktury

Pierwszy to monitorowanie wyłącznie tego, „czy działa”. Odpowiedź serwera na ping nie powie nic o zapełniającym się dysku ani o usłudze, która się zawiesiła. Monitoruj usługi i trendy, nie samą dostępność.

Drugi: alerty idą na skrzynkę, której nikt nie czyta. Typowo jest to adres byłego pracownika albo wspólna skrzynka „it@”, przeglądana raz w tygodniu.

Trzeci błąd to monitoring bez przeglądu. Nowy serwer, nowa drukarka sieciowa czy dodatkowe łącze nie trafiają do systemu, bo nikt o tym nie pomyślał. Dodanie urządzenia do monitoringu powinno być stałym elementem każdej zmiany w infrastrukturze, tak samo jak wpis do inwentaryzacji sprzętu IT.

Czwarty to brak historii. Same alerty nie pokażą, że zajętość dysku rośnie z miesiąca na miesiąc. Na wykresach trendów widać, kiedy zaplanować rozbudowę, zanim stanie się pilna.

Piąty: założenie, że kopia działa, skoro nie ma błędów. Brak alertu może oznaczać, że zadanie w ogóle się nie uruchomiło. Monitoruj wiek ostatniej poprawnej kopii, a samą kopię sprawdzaj przez regularne testy odtwarzania.

Jakie narzędzie wybrać

Do wyboru są rozwiązania open source instalowane na własnym serwerze, usługi w chmurze oraz systemy do zdalnego zarządzania (RMM), z których korzystają firmy świadczące obsługę IT. Dla małej firmy konkretny produkt ma mniejsze znaczenie niż kilka cech:

• obsługa urządzeń, które masz: serwerów Windows i Linux, przełączników, UPS, NAS, drukarek,
• monitorowanie usług i trendów, a nie tylko dostępności,
• elastyczne powiadomienia: e-mail, SMS, aplikacja, integracja z helpdeskiem,
• czytelne raporty dla osoby nietechnicznej, np. miesięczne podsumowanie dostępności i incydentów,
• niezależność od monitorowanej infrastruktury. Jeśli system monitoringu stoi na tym samym serwerze, nie powie Ci, że serwer padł.

O ostatnim punkcie łatwo zapomnieć. Dobrze uzupełnić monitoring o prostą kontrolę z zewnątrz, np. sprawdzanie dostępności łącza i strony internetowej spoza biura.

Kwartalny raport dla zarządu

Dane z monitoringu pomagają w decyzjach budżetowych. Raz na kwartał przygotuj krótkie zestawienie: liczbę awarii i czas ich trwania, urządzenia zbliżające się do limitu pojemności, sprzęt z powtarzającymi się problemami, stan kopii zapasowych. Z takiego raportu widać, gdzie inwestycja w sprzęt lub zmiana konfiguracji faktycznie zmniejszy ryzyko przestoju.

Serwer ERP, który zwolnił przez uszkodzoną macierz

Typowy scenariusz: firma produkcyjna ma jeden serwer dla ERP i plików i monitoruje tylko jego dostępność. Pewnego dnia system zaczyna działać bardzo wolno. Diagnoza pokazuje, że jeden z dysków w macierzy od dawna jest uszkodzony, a drugi zaczął zgłaszać błędy. Dane udaje się uratować, ale wymiana dysków i odbudowa macierzy wymagają przestoju w godzinach pracy.

Po takim zdarzeniu do monitoringu trafiają stan dysków, wiek kopii zapasowej i temperatura w szafie. Alerty krytyczne idą do dyżurnego partnera IT, a ostrzeżenia tworzą zgłoszenia w helpdesku. Kolejny słabnący dysk można wtedy wymienić w ramach planowanej obsługi, bez wpływu na produkcję.

Na start: krótka lista i jedno narzędzie

Wystarczy spisać, co jest dla firmy krytyczne, kto ma reagować i w jakim czasie. Do tego narzędzie, które sprawdzi te elementy i wyśle powiadomienie właściwej osobie. Połącz monitoring z helpdeskiem, wtedy każdy alert zostawia ślad i widać, jakie problemy się powtarzają.

Bez własnego działu IT monitoring jest jednym z głównych powodów, by powierzyć utrzymanie infrastruktury partnerowi zewnętrznemu, który reaguje na sygnały, których nikt w firmie nie ma czasu śledzić. Porozmawiajmy o obsłudze IT Twojej firmy i o tym, które elementy infrastruktury objąć monitoringiem najpierw.