Мониторинг сервера и гипервизора
Мониторинг сервера работает круглосуточно на всех тарифах и не расходует часы инженера. Тариф определяет глубину проверок.
Как это работает
- Агент Zabbix в активном режиме отправляет метрики на сервер мониторинга в Нидерландах.
- Мониторинг работает круглосуточно.
- Алерты от системы мониторинга получают инженеры INTROSERV и анализируют их. Если для устранения причины алерта нужно вмешательство, мы создаём для вас тикет с описанием проблемы и вариантами её решения.
Мониторинг охватывает доступность по сети через ICMP, параметры ОС и железа (RAID, SMART, температура), сервисы и приложения. Глубина и состав мониторинга зависят от вашего тарифа.
Что мониторится на каждом тарифе
| Тариф | Проверки | Зачем |
|---|---|---|
| Starter | доступность по сети через ICMP: ответ, время отклика, потери пакетов | Подтверждает, что сервер работает и доступен из сети. |
| Advanced | всё из Starter, плюс загрузка CPU и памяти, swap | Позволяет заметить нехватку ресурсов сервера до того, как он перестанет отвечать. |
| заполнение и I/O дисков | Предупреждает о нехватке места на дисках и о снижении их скорости. | |
| сетевой трафик | Показывает загрузку сетевого канала. | |
| датчики температуры железа | Предупреждает о перегреве оборудования. | |
| статус программного и аппаратного RAID, на Linux и Proxmox VE включая ZFS | Сообщает о неисправности дискового массива, например о выходе из строя одного из дисков. | |
| проактивные уведомления | Вы узнаёте о проблеме до того, как она приведёт к сбою. | |
| Premium | всё из Advanced, плюс детали аппаратного RAID-контроллера: версия прошивки, статус батареи и кеша | Позволяет заранее заметить износ батареи и неполадки RAID-контроллера. |
| статус сервисов | Сообщает об остановке важных для вас сервисов. | |
| собственные триггеры и пороги по запросу | Мониторинг настраивается под особенности вашего сервера и приложений. |
Сервисы, которые мониторятся на Premium
Мы контролируем состояние каждого сервиса: активен он или нештатно завершился.
| Система | Системные сервисы | Сервисы баз данных |
|---|---|---|
| Linux и Proxmox VE | cron, dbus, rsyslog, ssh, systemd-journald, systemd-networkd, systemd-resolved, systemd-udevd, systemd-timesyncd, unattended-upgrades | postgresql, mariadb, mysql, mongod, redis-server, valkey-server |
| Windows Server | EventLog, RpcSs, LanmanServer / LanmanWorkstation, W32Time, Netlogon, Schedule, WinRM, TermService, MpsSvc / BFE, WinDefend | PostgreSQL, MariaDB, MySQL 8.x, MongoDB, Redis |
О других важных для вас сервисах сообщите при подключении. На Premium их можно добавить как пользовательские триггеры.
Типовые алерты
- заканчивается место на диске;
- упал сервис;
- растёт нагрузка;
- деградировал RAID;
- перегрев.
На всех тарифах мы устраняем причины срабатывания алертов с вашего согласия.
Проблемы железа и сети инженеры решают сами, без согласования. Работы внутри ОС ведутся только через тикет и после вашего согласия.
Мониторинг гипервизора Proxmox VE
На Proxmox VE мониторинг гипервизора работает в дополнение к мониторингу сервера. Каждый узел подключается отдельно и оплачивается по своему тарифу.
Мониторинг охватывает локальные, сетевые и распределённые хранилища, состояние ВМ, задания бэкапа и состояние кластера.
| Тариф | Что проверяется | Зачем |
|---|---|---|
| Starter | локальное хранилище | Предупреждает о нехватке места для виртуальных машин. |
| состояние ВМ: работает, остановлена, приостановлена, перезагружается | Сообщает о незапланированной остановке или перезагрузке виртуальной машины. | |
| изменения конфигурации ВМ | Фиксирует незапланированные изменения параметров виртуальных машин. | |
| доступность QEMU guest agent | Сообщает, что гипервизор потерял связь с агентом внутри виртуальной машины. | |
| Advanced | всё из Starter, плюс сетевое хранилище | Сообщает о потере связи с сетевыми хранилищами. |
| overcommit CPU, памяти и хранилища | Предупреждает, если виртуальным машинам выделено больше ресурсов, чем есть на сервере. | |
| статус заданий бэкапа, общий и по каждой ВМ | Показывает, для каких виртуальных машин не создана актуальная резервная копия. | |
| состояние интерфейсов vmbr | Сообщает о сбое сетевого подключения виртуальных машин. | |
| состояние хранилища PBS | Сообщает о проблемах с хранилищем резервных копий Proxmox Backup Server. | |
| Premium | всё из Advanced, плюс состояние Ceph: OSD, PG, задержки RBD | Предупреждает о снижении надёжности и производительности распределённого хранилища. |
| состояние HA: кворум, fencing, pve-cluster | Предупреждает о риске потери отказоустойчивости кластера. | |
| репликация ZFS | Сообщает о сбое или отставании репликации данных между узлами. | |
| каналы и задержки Corosync | Сообщает о нарушении связи между узлами кластера. |
Инциденты железа и сети инженеры устраняют сами. Работы на уровне гипервизора и ВМ согласуются с вами.
Триггеры и пороги срабатывания
Алерт срабатывает, когда параметр выходит за порог и остаётся там заданное время. Для части параметров есть два уровня: предупреждение и критический. Ниже приведены значения по умолчанию.
Сервер: Linux, Windows Server и узлы Proxmox VE
Узлы Proxmox VE контролируются по тем же триггерам, что и серверы Linux, и дополнительно по триггерам гипервизора из следующей таблицы.
| Что контролируется | Порог по умолчанию |
|---|---|
| Доступность по сети | нет ответа на 3 проверки подряд; потери пакетов больше 20% или время отклика больше 150 мс в течение 5 минут |
| Агент и перезагрузка | нет данных от агента больше 5 минут; сервер работает меньше 10 минут после запуска |
| Процессор | загрузка больше 90% в течение 15 минут; на Linux нагрузка больше 1,5 на ядро, на Windows очередь больше 3 на ядро в течение 5 минут |
| Память | использовано больше 90% в течение 5 минут; на Linux свободно меньше 50% swap, на Windows файл подкачки заполнен больше чем на 80% |
| Место на дисках | заполнение больше 80% даёт предупреждение, больше 90% критический алерт; на Linux также запас inode меньше 20% и 10% |
| Скорость дисков | загрузка диска больше 95% или время отклика больше 30 мс в течение 15 минут |
| Сеть | интерфейс потерял соединение; больше 2 ошибок в секунду в течение 5 минут |
| Температура | больше 80 °C даёт предупреждение, больше 95 °C критический алерт |
| Диски и массивы | неисправен диск, RAID-массив или ZFS-пул; пул ZFS заполнен больше чем на 80% |
| RAID-контроллер | контроллер или батарея кеша неисправны; кеш перешёл в режим WriteThrough; температура больше 95 °C; сменилась версия прошивки |
| Сервисы | сервис остановлен; сервис был перезапущен |
Гипервизор Proxmox VE
| Что контролируется | Порог по умолчанию |
|---|---|
| Виртуальные машины и контейнеры | ВМ не запущена или была перезапущена; QEMU guest agent не отвечает; изменились состояние или конфигурация ВМ |
| Ресурсы узла | CPU или память заняты больше чем на 90% в течение 15 минут; виртуальным машинам выделено больше 300% ядер или больше 100% памяти узла |
| Хранилища | хранилище недоступно; заполнение больше 80% и 90%; дискам ВМ выделено больше 150% ёмкости хранилища |
| Сеть ВМ | сетевой мост vmbr не активен |
| Резервное копирование | задание бэкапа завершилось с ошибкой или предупреждением; нет свежего бэкапа ВМ дольше 26 часов; проверка бэкапа не прошла; ВМ не включена ни в одно задание бэкапа |
| Кластер и HA | узел потерял кворум; в сети не все узлы; нет кворума HA; идёт fencing; сервисы HA в состоянии ошибки; остановлен системный сервис Proxmox VE |
| Ceph | состояние HEALTH_WARN или HEALTH_ERR; OSD не работает; часть данных недоступна или не восстановлена дольше 15 минут; заполнение больше 75%; задержка OSD больше 50 мс |
| Репликация ZFS | репликация завершилась с ошибкой; последняя успешная синхронизация старше 1 часа |
| Corosync | канал между узлами недоступен или нестабилен; задержка больше 5 мс |
Значения в таблицах это пороги по умолчанию. На Premium пороги и собственные триггеры настраиваются под ваш сервер по запросу, в том числе отдельно для конкретных дисков, датчиков, интерфейсов и хранилищ.