一、故障现象:
昨天凌晨,手机收到几十条zabbix告警信息,告警内容如下:
Zabbix alerter processes more than 75% busy
二、分析原因:
1、zabbix的后端数据库卡了(因为查看了下计划任务,晚上的确有个清理表空间的调度),有可能在MySQL锁表后有所卡顿。
2、Zabbix服务器的IO卡顿
3、Zabbix进程分配到内存不足(4G内存,平时有1G多的剩余,并且压根没用到swap)
4、目标服务器网络不通(阿里云上的主机,我觉得这个概率不太大)
三、处理过程:
# vim /etc/zabbix/zabbix_server.conf
1
2
3
4
5
6
|
第一个修改的位置:
将其默认值5修改为20:
StartPollers=20
第二个修改的位置
# StartDiscoverers=1
StartDiscoverers=100
|
今天早上查看,发现没有出现类似告警了。