Моніторинг сервера та гіпервізора
Моніторинг сервера працює цілодобово на всіх тарифах і не витрачає години інженера. Тариф визначає глибину перевірок.
Як це працює
- Агент Zabbix в активному режимі надсилає метрики на сервер моніторингу в Нідерландах.
- Моніторинг працює цілодобово.
- Алерти від системи моніторингу отримують інженери INTROSERV і аналізують їх. Якщо для усунення причини алерту потрібне втручання, ми створюємо для вас тікет з описом проблеми та варіантами її вирішення.
Моніторинг охоплює доступність у мережі через ICMP, параметри ОС і заліза (RAID, SMART, температура), сервіси та застосунки. Глибина та склад моніторингу залежать від вашого тарифу.
Що моніториться на кожному тарифі
| Тариф | Перевірки | Навіщо |
|---|---|---|
| Starter | доступність у мережі через ICMP: відповідь, час відгуку, втрати пакетів | Підтверджує, що сервер працює і доступний із мережі. |
| Advanced | усе зі Starter, плюс завантаження CPU і пам'яті, swap | Дає змогу помітити нестачу ресурсів сервера до того, як він перестане відповідати. |
| заповнення та I/O дисків | Попереджає про нестачу місця на дисках і про зниження їхньої швидкості. | |
| мережевий трафік | Показує завантаження мережевого каналу. | |
| датчики температури заліза | Попереджає про перегрів обладнання. | |
| статус програмного та апаратного RAID, на Linux і Proxmox VE включно із ZFS | Повідомляє про несправність дискового масиву, наприклад про вихід з ладу одного з дисків. | |
| проактивні сповіщення | Ви дізнаєтеся про проблему до того, як вона призведе до збою. | |
| Premium | усе з Advanced, плюс деталі апаратного RAID-контролера: версія прошивки, статус батареї та кешу | Дає змогу заздалегідь помітити знос батареї та несправності RAID-контролера. |
| статус сервісів | Повідомляє про зупинку важливих для вас сервісів. | |
| власні тригери та пороги на запит | Моніторинг налаштовується під особливості вашого сервера та застосунків. |
Сервіси, які моніторяться на Premium
Ми контролюємо стан кожного сервісу: активний він чи завершився нештатно.
| Система | Системні сервіси | Сервіси баз даних |
|---|---|---|
| Linux і Proxmox VE | cron, dbus, rsyslog, ssh, systemd-journald, systemd-networkd, systemd-resolved, systemd-udevd, systemd-timesyncd, unattended-upgrades | postgresql, mariadb, mysql, mongod, redis-server, valkey-server |
| Windows Server | EventLog, RpcSs, LanmanServer / LanmanWorkstation, W32Time, Netlogon, Schedule, WinRM, TermService, MpsSvc / BFE, WinDefend | PostgreSQL, MariaDB, MySQL 8.x, MongoDB, Redis |
Про інші важливі для вас сервіси повідомте під час підключення. На Premium їх можна додати як користувацькі тригери.
Типові алерти
- закінчується місце на диску;
- впав сервіс;
- зростає навантаження;
- деградував RAID;
- перегрів.
На всіх тарифах ми усуваємо причини спрацювання алертів з вашої згоди.
Проблеми заліза та мережі інженери вирішують самі, без погодження. Роботи всередині ОС ведуться тільки через тікет і після вашої згоди.
Моніторинг гіпервізора Proxmox VE
На Proxmox VE моніторинг гіпервізора працює на додаток до моніторингу сервера. Кожен вузол підключається окремо й оплачується за своїм тарифом.
Моніторинг охоплює локальні, мережеві та розподілені сховища, стан ВМ, завдання бекапу та стан кластера.
| Тариф | Що перевіряється | Навіщо |
|---|---|---|
| Starter | локальне сховище | Попереджає про нестачу місця для віртуальних машин. |
| стан ВМ: працює, зупинена, призупинена, перезавантажується | Повідомляє про незаплановану зупинку або перезавантаження віртуальної машини. | |
| зміни конфігурації ВМ | Фіксує незаплановані зміни параметрів віртуальних машин. | |
| доступність QEMU guest agent | Повідомляє, що гіпервізор втратив зв'язок з агентом усередині віртуальної машини. | |
| Advanced | усе зі Starter, плюс мережеве сховище | Повідомляє про втрату зв'язку з мережевими сховищами. |
| overcommit CPU, пам'яті та сховища | Попереджає, якщо віртуальним машинам виділено більше ресурсів, ніж є на сервері. | |
| статус завдань бекапу, загальний і для кожної ВМ | Показує, для яких віртуальних машин не створено актуальної резервної копії. | |
| стан інтерфейсів vmbr | Повідомляє про збій мережевого підключення віртуальних машин. | |
| стан сховища PBS | Повідомляє про проблеми зі сховищем резервних копій Proxmox Backup Server. | |
| Premium | усе з Advanced, плюс стан Ceph: OSD, PG, затримки RBD | Попереджає про зниження надійності та продуктивності розподіленого сховища. |
| стан HA: кворум, fencing, pve-cluster | Попереджає про ризик втрати відмовостійкості кластера. | |
| реплікація ZFS | Повідомляє про збій або відставання реплікації даних між вузлами. | |
| канали та затримки Corosync | Повідомляє про порушення зв'язку між вузлами кластера. |
Інциденти заліза та мережі інженери усувають самі. Роботи на рівні гіпервізора та ВМ погоджуються з вами.
Тригери та пороги спрацювання
Алерт спрацьовує, коли параметр виходить за поріг і залишається там заданий час. Для частини параметрів є два рівні: попередження та критичний. Нижче наведено значення за замовчуванням.
Сервер: Linux, Windows Server і вузли Proxmox VE
Вузли Proxmox VE контролюються за тими самими тригерами, що й сервери Linux, і додатково за тригерами гіпервізора з наступної таблиці.
| Що контролюється | Поріг за замовчуванням |
|---|---|
| Доступність у мережі | немає відповіді на 3 перевірки поспіль; втрати пакетів понад 20% або час відгуку понад 150 мс протягом 5 хвилин |
| Агент і перезавантаження | немає даних від агента понад 5 хвилин; сервер працює менше 10 хвилин після запуску |
| Процесор | завантаження понад 90% протягом 15 хвилин; на Linux навантаження понад 1,5 на ядро, на Windows черга понад 3 на ядро протягом 5 хвилин |
| Пам'ять | використано понад 90% протягом 5 хвилин; на Linux вільно менше 50% swap, на Windows файл підкачки заповнений більш ніж на 80% |
| Місце на дисках | заповнення понад 80% дає попередження, понад 90% критичний алерт; на Linux також запас inode менше 20% і 10% |
| Швидкість дисків | завантаження диска понад 95% або час відгуку понад 30 мс протягом 15 хвилин |
| Мережа | інтерфейс втратив з'єднання; понад 2 помилки на секунду протягом 5 хвилин |
| Температура | понад 80 °C дає попередження, понад 95 °C критичний алерт |
| Диски та масиви | несправний диск, RAID-масив або ZFS-пул; пул ZFS заповнений більш ніж на 80% |
| RAID-контролер | контролер або батарея кешу несправні; кеш перейшов у режим WriteThrough; температура понад 95 °C; змінилася версія прошивки |
| Сервіси | сервіс зупинено; сервіс було перезапущено |
Гіпервізор Proxmox VE
| Що контролюється | Поріг за замовчуванням |
|---|---|
| Віртуальні машини та контейнери | ВМ не запущена або була перезапущена; QEMU guest agent не відповідає; змінилися стан або конфігурація ВМ |
| Ресурси вузла | CPU або пам'ять зайняті більш ніж на 90% протягом 15 хвилин; віртуальним машинам виділено понад 300% ядер або понад 100% пам'яті вузла |
| Сховища | сховище недоступне; заповнення понад 80% і 90%; дискам ВМ виділено понад 150% ємності сховища |
| Мережа ВМ | мережевий міст vmbr не активний |
| Резервне копіювання | завдання бекапу завершилося з помилкою або попередженням; немає свіжого бекапу ВМ понад 26 годин; перевірка бекапу не пройшла; ВМ не включена в жодне завдання бекапу |
| Кластер і HA | вузол втратив кворум; у мережі не всі вузли; немає кворуму HA; триває fencing; сервіси HA у стані помилки; зупинено системний сервіс Proxmox VE |
| Ceph | стан HEALTH_WARN або HEALTH_ERR; OSD не працює; частина даних недоступна або не відновлена понад 15 хвилин; заповнення понад 75%; затримка OSD понад 50 мс |
| Реплікація ZFS | реплікація завершилася з помилкою; остання успішна синхронізація старша за 1 годину |
| Corosync | канал між вузлами недоступний або нестабільний; затримка понад 5 мс |
Значення в таблицях це пороги за замовчуванням. На Premium пороги та власні тригери налаштовуються під ваш сервер на запит, зокрема окремо для конкретних дисків, датчиків, інтерфейсів і сховищ.