Monitoring serwera i hiperwizora
Monitoring serwera działa całą dobę we wszystkich planach i nie zużywa godzin inżyniera. Plan określa, jak głębokie są kontrole.
Jak to działa
- Agent Zabbix w trybie aktywnym wysyła metryki do serwera monitoringu w Holandii.
- Monitoring działa 24/7.
- Alerty z systemu monitoringu trafiają do inżynierów INTROSERV, którzy je analizują. Jeśli usunięcie przyczyny alertu wymaga interwencji, tworzymy dla Ciebie zgłoszenie z opisem problemu i możliwymi rozwiązaniami.
Monitoring obejmuje dostępność sieciową przez ICMP, parametry systemu operacyjnego i sprzętu (RAID, SMART, temperatura) oraz usługi i aplikacje. Głębokość i zakres monitoringu zależą od Twojego planu.
Co jest monitorowane w każdym planie
| Plan | Kontrole | Po co |
|---|---|---|
| Starter | dostępność sieciowa przez ICMP: odpowiedź, czas odpowiedzi, utrata pakietów | Potwierdza, że serwer działa i jest osiągalny z sieci. |
| Advanced | wszystko ze Starter, a także obciążenie CPU i pamięci, swap | Pozwala zauważyć brak zasobów, zanim serwer przestanie odpowiadać. |
| zajętość i I/O dysków | Ostrzega przed brakiem miejsca na dyskach i spadkiem ich wydajności. | |
| ruch sieciowy | Pokazuje obciążenie łącza sieciowego. | |
| czujniki temperatury sprzętu | Ostrzega przed przegrzaniem sprzętu. | |
| stan programowego i sprzętowego RAID, w Linux i Proxmox VE również ZFS | Informuje o awarii macierzy dyskowej, na przykład o uszkodzeniu jednego z dysków. | |
| proaktywne powiadomienia | Dowiadujesz się o problemie, zanim doprowadzi do awarii. | |
| Premium | wszystko z Advanced, a także szczegóły sprzętowego kontrolera RAID: wersja firmware, stan baterii i pamięci cache | Pozwala z wyprzedzeniem wykryć zużycie baterii i usterki kontrolera RAID. |
| stan usług | Informuje o zatrzymaniu ważnych dla Ciebie usług. | |
| własne triggery i progi na życzenie | Monitoring jest dostosowany do specyfiki Twojego serwera i aplikacji. |
Usługi monitorowane w planie Premium
Sprawdzamy stan każdej usługi: czy jest aktywna, czy zakończyła działanie w nieprawidłowy sposób.
| System | Usługi systemowe | Usługi baz danych |
|---|---|---|
| Linux i Proxmox VE | cron, dbus, rsyslog, ssh, systemd-journald, systemd-networkd, systemd-resolved, systemd-udevd, systemd-timesyncd, unattended-upgrades | postgresql, mariadb, mysql, mongod, redis-server, valkey-server |
| Windows Server | EventLog, RpcSs, LanmanServer / LanmanWorkstation, W32Time, Netlogon, Schedule, WinRM, TermService, MpsSvc / BFE, WinDefend | PostgreSQL, MariaDB, MySQL 8.x, MongoDB, Redis |
Inne ważne dla Ciebie usługi podaj podczas uruchomienia. W planie Premium można je dodać jako własne triggery.
Typowe alerty
- kończy się miejsce na dysku;
- usługa przestała działać;
- rośnie obciążenie;
- macierz RAID jest zdegradowana;
- przegrzanie.
We wszystkich planach usuwamy przyczyny alertów monitoringu za Twoją zgodą.
Problemy sprzętowe i sieciowe inżynierowie rozwiązują sami, bez akceptacji. Prace w systemie operacyjnym są prowadzone wyłącznie przez zgłoszenie i po Twojej zgodzie.
Monitoring hypervisora Proxmox VE
W Proxmox VE monitoring hypervisora działa jako uzupełnienie monitoringu serwera. Każdy węzeł jest podłączany osobno i rozliczany według własnego planu.
Monitoring obejmuje magazyny lokalne, sieciowe i rozproszone, stan maszyn wirtualnych, zadania kopii zapasowych i stan klastra.
| Plan | Co jest sprawdzane | Po co |
|---|---|---|
| Starter | magazyn lokalny | Ostrzega przed brakiem miejsca dla maszyn wirtualnych. |
| stan maszyn wirtualnych: działa, zatrzymana, wstrzymana, restartuje się | Informuje o nieplanowanym zatrzymaniu lub restarcie maszyny wirtualnej. | |
| zmiany konfiguracji maszyn wirtualnych | Rejestruje nieplanowane zmiany parametrów maszyn wirtualnych. | |
| dostępność QEMU guest agent | Informuje, że hypervisor stracił łączność z agentem w maszynie wirtualnej. | |
| Advanced | wszystko ze Starter, a także magazyn sieciowy | Informuje o utracie połączenia z magazynem sieciowym. |
| overcommit CPU, pamięci i magazynu | Ostrzega, jeśli maszynom wirtualnym przydzielono więcej zasobów, niż ma serwer. | |
| stan zadań kopii zapasowych, ogólny i dla każdej maszyny wirtualnej | Pokazuje, które maszyny wirtualne nie mają aktualnej kopii zapasowej. | |
| stan interfejsów vmbr | Informuje o awarii połączenia sieciowego maszyn wirtualnych. | |
| stan magazynu PBS | Informuje o problemach z magazynem kopii Proxmox Backup Server. | |
| Premium | wszystko z Advanced, a także stan Ceph: OSD, PG, opóźnienia RBD | Ostrzega przed spadkiem niezawodności i wydajności magazynu rozproszonego. |
| stan HA: kworum, fencing, pve-cluster | Ostrzega przed ryzykiem utraty odporności klastra na awarie. | |
| replikacja ZFS | Informuje o błędzie lub opóźnieniu replikacji danych między węzłami. | |
| łącza i opóźnienia Corosync | Informuje o zakłóceniach komunikacji między węzłami klastra. |
Incydenty sprzętowe i sieciowe inżynierowie usuwają sami. Prace na poziomie hypervisora i maszyn wirtualnych są z Tobą uzgadniane.
Triggery i progi
Alert jest wyzwalany, gdy parametr przekroczy próg i pozostaje powyżej niego przez określony czas. Część parametrów ma dwa poziomy: ostrzeżenie i krytyczny. Poniżej podano wartości domyślne.
Serwer: Linux, Windows Server i węzły Proxmox VE
Węzły Proxmox VE są sprawdzane tymi samymi triggerami co serwery Linux, a dodatkowo triggerami hypervisora z następnej tabeli.
| Co jest monitorowane | Domyślny próg |
|---|---|
| Dostępność sieciowa | brak odpowiedzi na 3 kolejne kontrole; utrata pakietów powyżej 20% lub czas odpowiedzi powyżej 150 ms przez 5 minut |
| Agent i restart | brak danych od agenta przez ponad 5 minut; serwer działa krócej niż 10 minut od uruchomienia |
| CPU | obciążenie powyżej 90% przez 15 minut; w Linux średnie obciążenie powyżej 1,5 na rdzeń, w Windows kolejka procesora powyżej 3 na rdzeń przez 5 minut |
| Pamięć | ponad 90% zajęte przez 5 minut; w Linux mniej niż 50% wolnego swapu, w Windows plik stronicowania zajęty w ponad 80% |
| Miejsce na dyskach | zajętość powyżej 80% to ostrzeżenie, powyżej 90% stan krytyczny; w Linux również wolne inody poniżej 20% i 10% |
| Wydajność dysków | wykorzystanie dysku powyżej 95% lub czas odpowiedzi powyżej 30 ms przez 15 minut |
| Sieć | interfejs utracił połączenie; ponad 2 błędy na sekundę przez 5 minut |
| Temperatura | powyżej 80 °C to ostrzeżenie, powyżej 95 °C stan krytyczny |
| Dyski i macierze | uszkodzony dysk, macierz RAID lub pula ZFS; pula ZFS zajęta w ponad 80% |
| Kontroler RAID | kontroler lub bateria cache są uszkodzone; cache przeszedł w tryb WriteThrough; temperatura powyżej 95 °C; zmieniła się wersja firmware |
| Usługi | usługa została zatrzymana; usługa została zrestartowana |
Hypervisor Proxmox VE
| Co jest monitorowane | Domyślny próg |
|---|---|
| Maszyny wirtualne i kontenery | maszyna wirtualna nie działa lub została zrestartowana; QEMU guest agent nie odpowiada; zmienił się stan lub konfiguracja maszyny wirtualnej |
| Zasoby węzła | CPU lub pamięć zajęte w ponad 90% przez 15 minut; maszynom wirtualnym przydzielono ponad 300% rdzeni lub ponad 100% pamięci węzła |
| Magazyny | magazyn jest niedostępny; zajętość powyżej 80% i 90%; dyskom maszyn wirtualnych przydzielono ponad 150% pojemności magazynu |
| Sieć maszyn wirtualnych | most sieciowy vmbr nie jest aktywny |
| Kopie zapasowe | zadanie kopii zakończyło się błędem lub ostrzeżeniem; brak świeżej kopii maszyny wirtualnej od ponad 26 godzin; weryfikacja kopii nie powiodła się; maszyna wirtualna nie jest objęta żadnym zadaniem kopii |
| Klaster i HA | węzeł utracił kworum; nie wszystkie węzły są online; brak kworum HA; trwa fencing; usługi HA w stanie błędu; zatrzymana usługa systemowa Proxmox VE |
| Ceph | stan HEALTH_WARN lub HEALTH_ERR; OSD nie działa; część danych jest niedostępna lub nieodtworzona dłużej niż 15 minut; zajętość powyżej 75%; opóźnienie OSD powyżej 50 ms |
| Replikacja ZFS | replikacja zakończyła się błędem; ostatnia udana synchronizacja jest starsza niż 1 godzina |
| Corosync | łącze między węzłami jest niedostępne lub niestabilne; opóźnienie powyżej 5 ms |
Wartości w tych tabelach to progi domyślne. W planie Premium progi i własne triggery są na życzenie dostosowywane do Twojego serwera, również osobno dla konkretnych dysków, czujników, interfejsów i magazynów.