С ростом инфраструктуры нагрузка на Zabbix сервер растёт. Вы можете встретить ошибку:
Zabbix server: Utilization of trapper processes over 75%
Посмотрим график Zabbix server: Utilization of trapper data collector processes, in %
Видим что утилизация в какой-то момент превысила 75%, в принципе, ничего страшного. Обычно в такой ситуации, если график более-менее ровный, нужно добавить поллеров.
Редактируем параметр StartTrappers в /etc/zabbix/zabbix_server.conf. По умолчанию StartTrappers=5, меняю на StartTrappers=10.
Перезагружаем службу zabbix-server:
service zabbix-server restartВ большинстве случаев это поможет.
Но у меня резкий рост графика, добавление трапперов не решило проблему. А проблема оказалась в DNS, который стал долго отвечать.
Каждое входящее соединение от агента запускало на сервере цепочку операций, многие из которых требовали обратного DNS-разрешения (PTR-записи). Сервер получает соединение и пытается определить имя хоста через gethostbyaddr(). Ждет ответа от DNS... 5 секунд... 10 секунд... таймаут... Только потом обрабатывает запрос и возвращает ошибку host not found, что можно увидеть в логах Zabbix. При нормальном DNS эти операции занимают миллисекунды. При медленном DNS — секунды.
