Zabbix监控虚拟机服务-告警与自动恢复

肖哥哥

发布于 2021-01-29 10:11:55

1.5K0

发布于 2021-01-29 10:11:55

文章被收录于专栏：后台及大数据开发

今天稍微空闲，使用下zabbix的5.0版本，目前生产环境是4.x版本

今天就只实现一个目的：监控任意一个服务（示例中监控的是docker.service），如果服务挂了，自动给恢复,先看一个动图

搭建步骤：

192.168.1.3是zabbixServer（还安装了Apache、mysql、也一并安装了agent）

安装步骤请参考官网：https://www.zabbix.com/download?zabbix=5.0&os_distribution=centos&os_version=7&db=mysql&ws=apache

其中有一步是安装mysql，参考我的笔记，单节点即可：https://note.youdao.com/ynoteshare1/index.html?id=c7c40773df025a55610053d8d8c83b97&type=note

192.168.1.4是agent

由于只需要安装agent，所以步骤就会少很多，大致就下面几步

rpm -Uvh https://repo.zabbix.com/zabbix/5.0/rhel/7/x86_64/zabbix-release-5.0-1.el7.noarch.rpm
yum clean all
yum install zabbix-agent

#修改agent配置 /etc/zabbix/zabbix_agentd.conf
vi /etc/zabbix/zabbix_agentd.conf
Server=192.168.1.3         #修改为zabbixServer地址
ServerActive=192.168.1.3   #修改为zabbixServer地址
Hostname=ZabbixAgent4      #这个名称会在创建host的时候被用到，各个节点要做区分
Timeout=10 （默认为3）

systemctl restart zabbix-agent
systemctl enable zabbix-agent

通过上述步骤，zabbix agent 、server都启动好了

下一步通过界面去添加host

注意：主机名称一定要和zabbix_agentd.conf中配置的完全一样，太鸡肋

然后就发现，为什么新加入的agent状态是未知的呢

经过测试，给主机增加对应的template

然后稍等会儿，就发现主机都可用了

服务的监控与恢复

首先我在192.168.1.4上安装了docker服务，下面我们就通过zabbix来监控docker服务的状态，若异常产生告警并自动恢复

1.创建监控项：就用自带的system.run执行一个shell命令即可

system.run[systemctl status docker |grep 'active (running)' |wc -l]

最底部有测试，配置完成前先测试下命令是否能被正确执行

补充说明：由于要执行远程命令，所以需要将远程命令开启，并记得重启agent，否则会提示不支持的项目

vi /etc/zabbix/zabbix_agentd.conf
增加：
AllowKey=system.run[*]

以前版本是设置 EnableRemoteCommands  但5.0改了
### Option: EnableRemoteCommands - Deprecated, use AllowKey=system.run[*] or DenyKey=system.run[*] instead
#	Internal alias for AllowKey/DenyKey parameters depending on value:
#	0 - DenyKey=system.run[*]
#	1 - AllowKey=system.run[*]
#
# Mandatory: no

只有监控项还不能监控，需要将监控项应用到触发器才行。触发器提供了表达式构造器，可以直接使用监控项生成对应的表达式

创建好后如下

保存后，去将192.168.1.4上的docker服务停了就会在首页看见告警了

但是这个告警会一直存在，因为服务没有自动恢复

下一步就是配置自动恢复，自动恢复在动作中配置即可

这里修正下，今天再测试另外环境时发现自动恢复时出现错误：Cannot obtain authentication methods: Would block requesting userauth list

纠结了下后，把上面命令加一个sudo就可以了 sudo /usr/bin/systemctl restart docker

或者添加配置zabbix用户权限

# visudo
可以在 sudoers文件中使用的行:
# allows 'zabbix' user to run all commands without password.
zabbix ALL=NOPASSWD: ALL
# allows 'zabbix' user to restart apache without password.
zabbix ALL=NOPASSWD: /etc/init.d/apache restart

否则可能会收到一封邮件

[root@localhost ~]# cat /var/spool/mail/root From root@localhost.localdomain Mon Jan 25 15:04:01 2021 Return-Path: <root@localhost.localdomain> X-Original-To: root Delivered-To: root@localhost.localdomain Received: by localhost.localdomain (Postfix, from userid 0) id C1CD73020E23; Mon, 25 Jan 2021 15:04:00 +0800 (CST) To: root@localhost.localdomain From: zabbix@localhost.localdomain Auto-Submitted: auto-generated Subject: *** SECURITY information for localhost.localdomain *** Message-Id: <20210125070400.C1CD73020E23@localhost.localdomain> Date: Mon, 25 Jan 2021 15:04:00 +0800 (CST)

localhost.localdomain : Jan 25 15:04:00 : zabbix : 用户不在 sudoers 中 ; TTY=unknown ; PWD=/ ; USER=root ; COMMAND=/usr/bin/systemctl restart docker

[root@localhost ~]# [root@localhost ~]#