编辑
2023-03-17
运维
00
请注意,本文编写于 551 天前,最后修改于 551 天前,其中某些信息可能已经过时。

目录

一、监控概述
1.1 为什么要监控
1.1.1 网站可用性
1.2 监控什么东西
1.2.1 监控范畴
1.3.1 远程管理服务器
1.3.2 监控硬件
二、安装Zabbix
2.1 环境检查
2.2.1 安装方式选择
2.2.2 服务端快速安装脚本
2.2.3 客户端快速部署脚本
2.3 检测连通性
2.3.1 服务端安装zabbix-get检测工具
三、Web界面操作
3.1 zabbix的web安装
3.1.1 使用浏览器访问
3.2 添加监控信息
3.2.1 修改监控管理机zabbix server
3.2.2 添加新的主机
3.2.3 查看监控内容
3.2.4 查看图像
四、自定义监控与监控报警
4.1 自定义监控
4.1.1 说明
4.1.2 预备知识
4.2 实现自定义监控
4.2.1 自定义语法
4.2.2 agent注册
4.2.3 在server端注册(web操作)
4.2.4 查看监控的图形
4.3 监控报警
4.3.1 第三方报警平台
4.3.2 onealert配置
4.3.3 安装 onealert Agent
4.3.1 如何删除onealert Agent
4.3.2 触发器响应,发送报警信息
4.4 监控可视化
4.4.1 聚合图形
4.4.2 幻灯片
4.5 模板的共享
4.5.1 主机共享
4.5.2 模板共享
五、监控全网服务器
5.2 规划方案
5.2.1 api接口使用(curl)
5.3 具体实施规划
5.3.1 硬件、系统、网络监控
5.3.2 应用服务监控
5.3.3 监控服务通用方法
5.4 实施全网监控
5.4.1 使用自动发现规则
5.4.2 监控备份服务器
5.4.3 监控NFS服务器
5.4.4 监控MySQL服务器
5.4.5 监控web服务器
5.4.6 监控URL地址
5.4.7 监控反向代理服务器
5.4.8 监控Nginx的7种连接状态
六、自动发现与自动注册
6.1 自动注册与自动注册
6.1.1 简介
6.1.2 两种模式
6.2 自动发现—被动模式
七、分布式监控与SNMP监控
7.1 分布式监控
7.1.1 作用
7.1.2 环境说明
7.1.2 配置zabbix proxy
7.2 SNMP监控
7.2.1 使用范围
7.2.2 安装snmp程序
7.2.3 配置snmp程序
7.2.4 测试snmp
7.2.5 在web界面进行配置

一、监控概述

1.1 为什么要监控

在需要的时刻,提前提醒我们服务器出问题了

当出问题之后,可以找到问题的根源

网站/服务器 的可用性

1.1.1 网站可用性

在软件系统的高可靠性(也称为可用性,英文描述为HA,High Available)里有个衡量其可靠性的标准——X个9,这个X是代表数字3~5。X个9表示在软件系统1年时间的使用过程中,系统可以正常使用时间与总时间(1年)之比,我们通过下面的计算来感受下X个9在不同级别的可靠性差异。

1个9:(1-90%)365=36.5天,表示该软件系统在连续运行1年时间里最多可能的业务中断时间是36.5天 2个9:(1-99%)365=3.65天 ,表示该软件系统在连续运行1年时间里最多可能的业务中断时间是3.65天 3个9:(1-99.9%)36524=8.76小时,表示该软件系统在连续运行1年时间里最多可能的业务中断时间是8.76小时。 4个9:(1-99.99%)36524=0.876小时=52.6分钟,表示该软件系统在连续运行1年时间里最多可能的业务中断时间是52.6分钟。 5个9:(1-99.999%)3652460=5.26分钟,表示该软件系统在连续运行1年时间里最多可能的业务中断时间是5.26分钟。 6个9:(1-99.9999%)3652460*60=31秒, 示该软件系统在连续运行1年时间里最多可能的业务中断时间是31秒

1.2 监控什么东西

监控一切需要监控的东西,只要能够想到,能够用命令实现的都能用来监控

1.2.1 监控范畴

图片

1.3.1 远程管理服务器

如果想远程管理服务器就有远程管理卡,比如Dell idRAC,HP ILO,IBM IMM

1.3.2 监控硬件

二、安装Zabbix

2.1 环境检查

图片

2.2.1 安装方式选择

2.2.2 服务端快速安装脚本

图片

图片

2.2.3 客户端快速部署脚本

图片

2.3 检测连通性

2.3.1 服务端安装zabbix-get检测工具

yum install zabbix-get

图片

三、Web界面操作

3.1 zabbix的web安装

3.1.1 使用浏览器访问

http://10.0.0.61/zabbix/setup.php

图片

在检测信息时,可查看具体的报错信息进行不同的解决

图片

选择mysql数据库,输入密码即可

图片

host与port不需要修改,name自定义

图片

确认信息,正确点击下一步

图片

安装完成、点击finsh

图片

进入登陆界面 账号Admin密码zabbix 注意A大写

图片

3.2 添加监控信息

3.2.1 修改监控管理机zabbix server

配置 >> 主机

图片

主机名称:要与主机名相同,这是zabbix server程序用的

可见名称:显示在zabbix网页上的,给我们看的

图片

修改后,要将下面的已启用要勾上

图片

添加完成就有了管理机的监控主机

图片

3.2.2 添加新的主机

配置 >> 主机 >> 创建主机

图片

注意勾选以启用

图片

然后添加模板,选择linux OS ,先点小添加,再点大添加。

图片

添加完成,将会又两条监控主机信息

图片

3.2.3 查看监控内容

检测中 >> 最新数据

在最新数据中需要筛选,

图片

输入ip或者名字都能够搜索出来

图片

在下面就会列出所有的监控项

图片

3.2.4 查看图像

图片

检测中 >> 图形 选择正确的主机。选择要查看的图形即可出图

图片

四、自定义监控与监控报警

4.1 自定义监控

4.1.1 说明

zabbix自带模板Template OS Linux (Template App Zabbix Agent)提供CPU、内存、磁盘、网卡等常规监控,只要新加主机关联此模板,就可自动添加这些监控项。 需求:服务器登陆人数不能超过三人,超过三人报警

4.1.2 预备知识

图片

4.2 实现自定义监控

4.2.1 自定义语法

image-20220715103011569

4.2.2 agent注册

image-20220715103057895

4.2.3 在server端注册(web操作)

① 创建模板 配置 >> 模板 >> 创建模板

image-20220715103111265

点击添加,即可创建出来模板

image-20220715103118454

查看创建出来的模板。

② 创建应用集 应用集类似(目录/文件夹),其作用是给监控项分类。 点击 应用集 >> 创建应用集

image-20220715103138192

自定义应用集的名称,然后点击添加 ③ 创建监控项 监控项 >> 创建监控项

image-20220715103145071

键值 — key,即前面出创建的login-user。

image-20220715103155692

注意:创建监控项的时候,注意选择上应用集,即之前创建的安全。

image-20220715103209383

④创建触发器 触发器的作用:当监控项获取到的值达到一定条件时就触发报警 (根据需求创建) 触发器 >> 创建触发器 创建触发器,自定义名称,该名称是报警时显示的名称。 表达式,点击右边的添加,选择表达式。 严重性自定义。

image-20220715103218469

表达式的定义 ↓ ,选择之前创建的监控项, 最新的T值为当前获取到的值。

image-20220715103225263

添加完成,能够在触发器中看到添加的情况

image-20220715103233413

⑤创建图形 以图形的方式展示出来监控信息 图形 >> 创建图形 名称自定义,关联上监控项。

image-20220715103246259

⑥主机关联模板 配置 >> 主机 一个主机可以关联多个模板

image-20220715103256605

4.2.4 查看监控的图形

image-20220715103309908

4.3 监控报警

4.3.1 第三方报警平台

http://www.onealert.com 通过 OneAlert 提供的通知分派与排班策略,以及全方位的短信、微信、QQ、电话提醒服务,您可以在最合适的时间,将最重要的信息推送给最合适的人员。

4.3.2 onealert配置

添加应用,注意添加的是zabbix

image-20220715103321485

实现微信报警需要关注微信公众号即可。

image-20220715103327375

4.3.3 安装 onealert Agent

image-20220715103337275

4.3.1 如何删除onealert Agent

①删除报警媒介类型中的脚本

image-20220715103349537

②删除创建的用户 image-20220715103355239

③删除用户群组 image-20220715103401394

④删除创建的动作 image-20220715103416048

4.3.2 触发器响应,发送报警信息

image-20220715103423688

在微信和邮件中,均能收到报警信息。

image-20220715103601888

注意:当状态改变的时候才会发邮件 好→坏 坏→好

4.4 监控可视化

4.4.1 聚合图形

最新数据 >> 图形 image-20220715103611875

自定义名称

image-20220715103618637

点击聚合图形的名称,进行更改,添加要显示的图形即可。

image-20220715103625401

4.4.2 幻灯片

添加幻灯片 监测中 >> 复合图形 >> 幻灯片演示

image-20220715103633555

创建幻灯片,名称自定,选择要显示的

幻灯片根据设定的时间自动播放

4.5 模板的共享

4.5.1 主机共享

在主机页打开,全选后点击导出 image-20220715103651106

导入

image-20220715103658971

4.5.2 模板共享

https://github.com/zhangyao8/zabbix-community-repos

image-20220715103706249

五、监控全网服务器

5.1 需求说明 实际需求: 公司已经有了100台服务器,现在需要使用zabbix全部监控起来。

5.2 规划方案

常规监控:cpu,内存,磁盘,网卡 问题:怎样快速添加100台机器

  • 方法1:使用克隆的方式
  • 方法2:自动注册和自动发现
  • 方法3:调用zabbix api接口 curl 、python

开发自己的运维平台兼容zabbix的通道 服务监控,url监控等特殊监控:自定义监控

5.2.1 api接口使用(curl)

image-20220715103722237

5.3 具体实施规划

5.3.1 硬件、系统、网络监控

所有集群节点(所有虚拟机)都监控上 交换机,路由器监控(简单方法:换成端口对应服务器网卡流量监控;标准方法:监控交换机的网卡) snmp监控

5.3.2 应用服务监控

  1. 监控备份服务器,简单方法是监控rsync端口,如果有其他更佳方案可以说明; 方法1:监控873端口net.tcp.port[,873] 方法2:模拟推送拉取文件
  2. 监控NFS服务器,使用监控NFS进程来判断NFS服务器正常,如果有其他更佳方案可以说明; 方法1:端口(通过111的rpc端口获取nfs端口) net.tcp.port[,111] 方法2:showmount -e ip|wc -l
  3. 监控MySQL服务器,简单方法监控mysql的3306端口,或者使用zabbix提供的Mysql模板,如果有其他更佳方案可以说明; 方法1:端口(通过3306的mysql端口) net.tcp.port[,3306] 方法2:mysql远程登录 方法3:使用zabbix agent自带的模板及key
  4. 监控2台web服务器,简单方法监控80端口,如果有其他更佳方案可以说明; 方法1:端口(通过80的web端口) net.tcp.port[,80] 方法2:看网页状态码、返回内容==zabbix 自带WEB检测
  5. 监控URL地址来更精确的监控我们的网站运行正常; 使用zabbix自带的监控Web监测 进行监控
  6. 监控反向代理服务器,PPTP服务器等你在期中架构部署的服务。 nginx,pptp ntp 端口udp 123
  7. 监控Nginx的7种连接状态。 自定义监控

5.3.3 监控服务通用方法

  1. 监控端口 netstat ss lsof ==》 wc -l
  2. 监控进程 ps -ef|grep 进程|wc -l 试运行一下
  3. 模拟客户端的使用方式监控服务端 web ==》 curl mysql ==》 select insert memcache ==》 set再get

5.4 实施全网监控

安装客户端脚本,for centos6

image-20220715103736399

5.4.1 使用自动发现规则

添加自动发现规则

image-20220715103743747

创建发现动作

image-20220715103751445

查看自动发现的机器。

image-20220715103756214

5.4.2 监控备份服务器

利用系统自带键值进行监控net.tcp.listen[port] 创建新的模板

image-20220715103804719

在服务端进行测试

image-20220715103812735

将模板添加到主机

image-20220715103817557

5.4.3 监控NFS服务器

创建nfs监控模板 使用 proc.num[,,,] 键值,检测nfs进程的数量

image-20220715103824223

在服务端进行测试

将模板绑定到主机

5.4.4 监控MySQL服务器

将自带的mysqlkey值加上mysql的账户密码,否则不能获取到数据。

image-20220715103846742

使用系统自带模板 net.tcp.port[,port] 利用自带的监控端口键值进行监控

image-20220715103853310

添加新的mysql监控项端口

image-20220715103904370

[root@m01 ~]# zabbix_get -s 172.16.1.51 -p 10050 -k "net.tcp.port[,3306]"1 #检查是否能建立 TCP 连接到指定端口。返回 0 - 不能连接;1 - 可以连接

将模板关联到主机

5.4.5 监控web服务器

image-20220715103930444

创建监控模板 监控 nginx服务与 80 端口

proc.num[<name>,<user>,<state>,<cmdline>]进程数。返回整数 net.tcp.port[<ip>,port] 检查是否能建立 TCP 连接到指定端口。返回 0 - 不能连接;1 - 可以连接

image-20220715103940925

[root@m01 ~]# zabbix_get -s 172.16.1.8 -p 10050 -k “proc.num[,,,nginx]”2[root@m01 ~] zabbix_get -s 172.16.1.8 -p 10050 -k “net.tcp.port[,80]”1

将模板关联到主机

5.4.6 监控URL地址

创建监测页面

echo ok >> /application/nginx/html/www/check.html

测试监控面页

[root@web03 ~]# for ip in 7 8 9 ;do curl 10.0.0.$ip/check.html ;doneok ok ok

创建web监测模板

创建应用集 image-20220715104054078

创建Web场景 image-20220715104103527

创建图形 image-20220715104111205

将模板关联到主机 image-20220715104122237

监测结果 image-20220715104129120

5.4.7 监控反向代理服务器

创建自定义key

[root@lb01 ~]# cat /etc/zabbix/zabbix_agentd.d/userparameter_nk.confUserParameter=keep-ip,ip a |grep 10.0.0.3|wc -l

在服务端测试

[root@m01 ~]# zabbix_get -s 172.16.1.5 -p 10050 -k "keep-ip"1[root@m01 ~]# zabbix_get -s 172.16.1.6 -p 10050 -k "keep-ip"0

在web界面添加模板 image-20220715104206357

将模板关联到主机

5.4.8 监控Nginx的7种连接状态

nginx服务器显示status

…… location /status { stub_status on; access_log off; } ……
[root@web01 ~]# for ip in 7 8 9 ;do curl 172.16.1.$ip/status ;doneActive connections: 1server accepts handled requests 73 73 69Reading: 0 Writing: 1 Waiting: 0 Active connections: 1server accepts handled requests 134 134 127Reading: 0 Writing: 1 Waiting: 0 Active connections: 1server accepts handled requests 7 7 7Reading: 0 Writing: 1 Waiting: 0

在nginx服务器上添加key

cat >/etc/zabbix/zabbix_agentd.d/userparameter_nginx_status.conf <<'EOF'UserParameter=nginx_active,curl -s 127.0.0.1/status|awk '/Active/ {print $NF}'UserParameter=nginx_accepts,curl -s 127.0.0.1/status|awk 'NR==3 {print $1}'UserParameter=nginx_handled,curl -s 127.0.0.1/status|awk 'NR==3 {print $2}'UserParameter=nginx_requests,curl -s 127.0.0.1/status|awk 'NR==3 {print $3}'UserParameter=nginx_reading,curl -s 127.0.0.1/status|awk 'NR==4 {print $2}'UserParameter=nginx_writing,curl -s 127.0.0.1/status|awk 'NR==4 {print $4}'UserParameter=nginx_waiting,curl -s 127.0.0.1/status|awk 'NR==4 {print $6}'EOF

服务端测试

[root@m01 ~]# zabbix_get -s 172.16.1.7 -p 10050 -k "nginx_waiting"0 [root@m01 ~]# zabbix_get -s 172.16.1.8 -p 10050 -k "nginx_waiting"0 [root@m01 ~]# zabbix_get -s 172.16.1.9 -p 10050 -k "nginx_waiting"0

在zabbix-web上添加

image-20220715104443301

监控项 image-20220715104451363

添加图形 image-20220715104458133

将模板关联到主机 image-20220715104505307

查看添加的图形 image-20220715104510745

六、自动发现与自动注册

6.1 自动注册与自动注册

6.1.1 简介

自动发现:

zabbix Server主动发现所有客户端,然后将客户端登记自己的小本本上,缺点zabbix server压力山大(网段大,客户端多),时间消耗多。

自动注册:

zabbix agent主动到zabbix Server上报到,登记;缺点agent有可能找不到Server(配置出错)

6.1.2 两种模式

  • 被动模式:默认 agent被server抓取数据 (都是在agent的立场上说)
  • 主动模式:agent主动将数据发到server端 (都是在agent的立场上说)

注意:两种模式都是在agent上进行配置 zabbix 的使用要在hosts文件中预先做好主机名的解析

6.2 自动发现—被动模式

  • 第一个里程碑:完成之前的安装 zabbix Server安装完毕
  • 第二个里程碑:配置agent客户端 zabbix agent安装完毕,注意配置Server=172.16.1.61
  • 第三个里程碑:在web界面上进行配置 web界面:配置 >> 自动发现 >> Local network

使用自带的自动发现规则(进行修改)即可

在ip范围内输入ip,注意格式; 延迟在实际的生产环境中要大一些,实验环境可以小一些

创建发现动作 配置 >> 动作 >> Auto discovery. Linux servers.

① 配置动作 image-20220715104536528

② 在条件中添加条件,让添加更准确 image-20220715104543149

③ 在操作中添加 a) 添加主机与启用主机 image-20220715104552971

七、分布式监控与SNMP监控

7.1 分布式监控

7.1.1 作用

分担压力,减轻负载 多机房监控 zabbix Server ===》 zabbix agent (只能同一个局域网监控) 分担压力,降低负载

zabbix Server ===》 zabbix proxy ===》zabbix agent1 agent2 agent3 。。。172.16.1.61 172.16.1.21 172.16.1.0/24 ===》 zabbix proxy ===》zabbix agent4 agent5 agent6 。。。

多机房监控

zabbix Server(北京) ==》 zabbix proxy(每个机房搭建) ==》 zabbix agent 122.71.240.233/172.16.1.61 122.71.241.11/172.16.2.21 172.16.2.0/24

7.1.2 环境说明

zabbix server m01 zabbix proxy cache01 zabbix agent cache01

7.1.2 配置zabbix proxy

第一个里程碑:配置zabbix yum源,并安装proxy

rpm -ivh http://repo.zabbix.com/zabbix/3.0/rhel/7/x86_64/zabbix-release-3.0-1.el7.noarch.rpm yum install zabbix-proxy-mysql -y

第二个里程碑:安装数据库 zabbix proxy也需要数据库,这个数据库不是用于存储监控数据的 只是用于存储配置信息

安装数据库

yum -y install mariadb-serversystemctl start mariadb.service

建立数据库

create database zabbix_proxy character set utf8 collate utf8_bin; grant all privileges on zabbix_proxy.* to zabbix@'localhost' identified by'zabbix'; exit

导入数据文件

zcat /usr/share/doc/zabbix-proxy-mysql-3.0.13/schema.sql.gz |mysql -uzabbix -pzabbix zabbix_proxy

配置zabbix proxy 连接数据库

sed -i.ori '162a DBPassword=zabbix' /etc/zabbix/zabbix_proxy.conf sed -i 's#Server=127.0.0.1#Server=172.16.1.61#' /etc/zabbix/zabbix_proxy.conf sed -i 's#Hostname=Zabbix proxy#Hostname=cache01#' /etc/zabbix/zabbix_proxy.conf# Hostname

作为后面添加的代理程序名称,要保持一致

启动

systemctl restart zabbix-proxy.service

检查端口

[root@cache01 ~]# netstat -lntup |grep zabbix tcp 0 0 0.0.0.0:10050 0.0.0.0:* LISTEN 105762/zabbix_agent tcp 0 0 0.0.0.0:10051 0.0.0.0:* LISTEN 85273/zabbix_proxy tcp6 0 0 :::10050 :::* LISTEN 105762/zabbix_agent tcp6 0 0 :::10051 :::* LISTEN 85273/zabbix_proxy

第三个里程碑:修改agent配置指向 proxy

[root@cache01 ~]# grep ^Server /etc/zabbix/zabbix_agentd.confServer=172.16.1.61ServerActive=172.16.1.61 [root@cache01 ~]# sed -i 's#172.16.1.61#172.16.1.21#g' /etc/zabbix/zabbix_agentd.conf [root@cache01 ~]# grep ^Server /etc/zabbix/zabbix_agentd.confServer=172.16.1.21ServerActive=172.16.1.21 [root@cache01 ~]# systemctl restart zabbix-agent.service

第四个里程碑:web界面添加代理

管理 >> agent代理程序 >> 创建代理

image-20220715105014481

代理程序名称要填写主机名

image-20220715105036500

稍等片刻就能在程序中出现代理

image-20220715105047931

在主机中能发现主机代理

image-20220715105055324

7.2 SNMP监控

7.2.1 使用范围

无法安装agent 很多前辈的监控软件都可以监控各种设备 都是通过snmp监控 snmp simple network manager protocol 简单网络管理协议 简单网络管理协议(SNMP),由一组网络管理的标准组成,包含一个应用层协议(application layer protocol)、数据库模型(database schema)和一组资源对象。该协议能够支持网络管理系统,用以监测连接到网络上的设备是否有任何引起管理上关注的情况。

7.2.2 安装snmp程序

yum -y install net-snmp net-snmp-utils

7.2.3 配置snmp程序

sed -i.ori '57a view systemview included .1' /etc/snmp/snmpd.conf systemctl start snmpd.service

7.2.4 测试snmp

[root@m01 ~]# snmpwalk -v 2c -c public 127.0.0.1 sysnameSNMPv2-MIB::sysName.0 = STRING: m01

说明:

  • snmpwalk 类似 zabbix_get
  • -v 2c 指定使用snmp协议的版本 snmp分为v1 v2 v3
  • -c public 指定暗号
  • sysname 类似zabbix的key

7.2.5 在web界面进行配置

添加新的主机,注意使用snmp接口 image-20220715105153956

选择模板,注意使用SNMP的模板

添加完成就能够在主机中看到snmp监控对的主机

如果对你有用的话,可以打赏哦
打赏
ali pay
wechat pay

本文作者:Gustav

本文链接:

版权声明:本博客所有文章除特别声明外,均采用 BY-NC-SA 许可协议。转载请注明出处!