当前位置:首页 » 《我的小黑屋》 » 正文

深入 Prometheus 监控生态 - 第二篇:网络等硬件设备监控(snmp-exporter)

29 人参与  2024年11月02日 15:20  分类 : 《我的小黑屋》  评论

点击全文阅读


文章目录

前言一、群晖 NAS1、开启 SNMP 服务2、测试3、MIB 文档4、编写 snmp.yml5、运行snmp-exporter6、加入Prometheus监控 二、QNAP NAS1、开启 SNMP 服务2、SNMP MIB 文件下载3、generate的使用4、运行snmp-exporter5、加入Prometheus监控 三、华为防火墙1、开启 SNMP 服务2、测试网络测试连接测试 3、查阅文档4、部署 snmp-exporter + Prometheus监控。 其他


前言

SNMP监控原理是通过SNMP协议查询网络设备上的MIB(管理信息库),设备运行SNMP代理,Prometheus通过SNMP Exporter轮询这些设备,SNMP Exporter会翻译SNMP协议的数据为Prometheus的时间序列格式,供Prometheus采集和存储。

下列就以群晖 NAS、QNAS、华为防火墙设备为例子,开启 SNMP 服务并部署 Exporter 进行监控,其中包括 MIB 文档解读、Exporter 镜像制作 + 部署、数据抓取测试等。


一、群晖 NAS

1、开启 SNMP 服务

浏览器登录 群晖管理后台,点击 “控制面板” → “终端机和 SNMP” → “SNMP” → 勾选“启用 SNMP 服务” + 勾选 “SNMPv1、SNMPv2c 服务” )+ 填写 “社群” 信息(可理解为密码)→ 点击“应用”生效

2、测试

在另一台设备(Linux)可访问该群晖 NAS (UDP:161端口),使用 snmpwalk 命令测试,若没有这通过命令安装:
Centos/Redhat:

sudo yum updatesudo yum install net-snmp-utils

Ubuntu/Debian:

sudo apt updatesudo apt install snmp

测试命令:

snmpwalk -v 2c -c 社群密码 群晖IP

若返回一大串 iso. 开头的信息,则表示正常,否则请检查网络、社群密码、群晖IP

3、MIB 文档

群晖管理后台SNMP 配置页面,点击最下方访问 Synology 网站 访问Synology MIB 文档
或 Google 搜索 群晖 SNMP MIB 文档

文档访问链接如下:
群晖 SNMP MIB Guide 文档

查阅文档,找到自己所监控信息的每一项值所对应的 OID 和 返回值。

比如说,我要监控这台 NAS 的硬盘,在文档的p8-9页 OID: .1.3.6.1.4.1.6574.2 中有说明:
.13为硬盘健康状态,.1为硬盘索引号,.9为硬盘坏道数

PS:
感觉文档有点坑,光看文档会误以为 OID .1.3.6.1.4.1.6574.2 直接加上 .13(后缀)就能获取状态值,其实不是的,使用 snmpwalk 命令查询 .1.3.6.1.4.1.6574.2.13

snmpwalk -v 2c -c 社群密码 群晖IP 1.3.6.1.4.1.6574.2.13

返回报错:

iso.3.6.1.4.1.6574.2.13 = No Such Object available on this agent at this OID

通过查阅 .1.3.6.1.4.1.6574.2 的返回值,才知道其实它是 .1.3.6.1.4.1.6574.2.1.1.13,命令:

snmpwalk -v 2c -c 社群密码 群晖IP 1.3.6.1.4.1.6574.2

4、编写 snmp.yml

知道自己抓取的 OID 后,就可编写 snmp.yml 了(snmp-exporter 用于过滤 snmp 信息),内容如下:

syno_mib:  version: 2  walk:    - 1.3.6.1.4.1.6574.2.1.1  metrics:    - name: disk_health      oid: 1.3.6.1.4.1.6574.2.1.1.13      type: gauge      help: "Disk health status"      indexes:        - labelname: ifIndex          type: gauge      lookups:        - labels:            - ifIndex          labelname: disk_name          oid: 1.3.6.1.4.1.6574.2.1.1.1          type: DisplayString    - name: disk_smart      oid: 1.3.6.1.4.1.6574.2.1.1.9      type: gauge      help: "Disk smart status"      indexes:        - labelname: ifIndex          type: gauge      lookups:        - labels:            - ifIndex          labelname: disk_name          oid: 1.3.6.1.4.1.6574.2.1.1.1          type: DisplayString  auth:    community: 社群

命令解释:

syno_mib: 定义了一个 SNMP 采集的配置项,名字为 syno_mib。

version: 2 指定了 SNMP 的版本为 2,表示这个配置使用 SNMP v2 协议。

walk: walk 是用来遍历指定的 OID 子树并抓取所有相关的 SNMP 数据。(这个get用不上)

1.3.6.1.4.1.6574.2.1.1 这是需要遍历的 OID,代表这个 OID 及其子节点的数据将会被抓取。1.3.6.1.4.1.6574.2.1.1 通常与磁盘信息相关。

metrics: 定义了要采集的 SNMP 指标。

name: disk_health 定义了一个名为 disk_health 的指标,用来表示磁盘的健康状态。

oid: 1.3.6.1.4.1.6574.2.1.1.13 指定了获取 disk_health 指标的 OID,1.3.6.1.4.1.6574.2.1.1.13 是这个健康状态的具体 OID。

type: gauge 指定了指标类型为 gauge,表示这个值是一个可以上下浮动的数值类型。

help: “Disk health status” 这是一段帮助信息,说明了这个指标的用途,表示它用于显示磁盘的健康状态。

indexes: 指定了该指标需要哪些索引值来标识。(这里开始往下的目的都是按 1.3.6.1.4.1.6574.2.1.1.1硬盘索引号划分返回的状态值)

labelname: ifIndex 定义了一个标签名 ifIndex,通常是 SNMP 的接口索引,用于区分不同的磁盘。 type: gauge 说明这个索引值是一个 gauge 类型的值。 lookups: 定义了一个映射关系,用于将索引值转换为可读的名称。 labels: 定义了映射时需要使用的标签。ifIndex 指定使用 ifIndex 标签。

labelname: disk_name 定义了一个新的标签 disk_name,用于标识磁盘的名称。

oid: 1.3.6.1.4.1.6574.2.1.1.1 指定了用于获取磁盘名称的 OID,1.3.6.1.4.1.6574.2.1.1.1 用于查找磁盘的显示名称。

type: DisplayString 指定了该 OID 返回的值是一个 DisplayString 类型,即可显示的文本字符串。

5、运行snmp-exporter

dockerhub 上 Prometheus 官方做了个 snmp-exporter 镜像,就叫 prom/snmp-exporter,直接 docker pull 拉下来运行即可。

# 拉取docker pull prom/snmp-exporter:v0.26.0# 在台能访问群晖 NAS 的设备上运行docker run -d \  -v /path/to/snmp.yml:/etc/snmp_exporter/snmp.yml \  -p 9116:9116 \  prom/snmp-exporter:v0.26.0

PS:最好使用固定版本,否则每次拉取都是最新版本的

IP + 端口号 在浏览器访问,Target 栏 输入群晖 NAS 的 IPModule 栏 输入自定义的采集项名,如,上面用的是 syno_mib,若能返回数据,则成功,否则检查IP地址、网络、采集项名等。

PS:snmp-exporter抓取数据通俗点来说,就是在snmp-exporter自身配好过滤规则,通过输入对方ip再去获取对方snmp的数据。

6、加入Prometheus监控

修改普罗米修斯的 /etc/prometheus/prometheus.rules 文件,追加如下内容并重启服务。

  - job_name: 'snmp-syno-nas'    scrape_interval: 5m    scrape_timeout: 3m    static_configs:      - targets:        - 群晖NAS IP1        - 群晖NAS IP2        - 群晖NAS IP3        - 群晖NAS IP......    metrics_path: /snmp    params:      module: [syno_mib]    relabel_configs:      - source_labels: [__address__]        target_label: __param_target      - source_labels: [__param_target]        target_label: instance      - target_label: __address__        replacement: 'IP:9116'

PS:
最后 replacement 部分,若是k8s容器部署 snmp-exporter ,和普罗米修斯在同一命名空间,可改成 “容器名: ‘IP:9116’”

在浏览器访问 Prometheus ,点击 “Status” → “Targets” 中若能发现 “snmp-syno-nas” 栏,且设备数量对得上,State 为 UP,则代表已接入普罗米修斯监控了。


二、QNAP NAS

1、开启 SNMP 服务

浏览器登录 QNAP 管理后台,点击“控制台” → “SNMP” → 勾选 “启用 SNMP 服务器” + 选择“SNMP 版本”(这里勾选的是“SNMP V1/V2”)+ 填写“社区”(可理解为密码)→ 点击“应用”生效

2、SNMP MIB 文件下载

同样在 SNMP 页面,点击 SNMP MIB 的 “下载” 并进行查阅。
这里和群晖不同,它只提供了 NAS.mib 的文件下载(QNAP 官方文档也没找到)。

打开 NAS.mib 文件,片段如下:

systemCPU-UsageEX OBJECT-TYPE    SYNTAX Integer32    MAX-ACCESS read-only    STATUS     current    DESCRIPTION        "system CPU usage"    ::= { systemInfoEx 1 }

命令解释:

systemCPU-UsageEX OBJECT-TYPE: 定义了一个 SNMP 对象,名称为 systemCPU-UsageEX,表示系统 CPU 使用率的对象类型。 SYNTAX Integer32: 这个属性定义了对象的类型,这里定义的 SYNTAX 是 Integer32,表示这个对象的值是 32 位整数。 MAX-ACCESS read-only: MAX-ACCESS 表示该对象的访问权限。read-only 说明这个对象只能被读取,不能修改。 STATUS current: STATUS 属性说明对象的状态。current 表示这是一个当前的有效对象。 DESCRIPTION “system CPU usage”: DESCRIPTION 是对该对象的简要描述,解释了这个对象表示的是系统 CPU 使用率。 ::= { systemInfoEx 1 }: 这是对象的 OID(对象标识符)。systemInfoEx 是一个父级节点,1 表示这是该父级节点下的第一个子对象。它标识了这个对象在整个 MIB 结构中的位置。

PS:总的来说,主要看两个地方就够了
systemCPU-UsageEX 就是对应 snmp.yml 文件里 metrics 的 name (后续生成 snmp.yml 要用的)
DESCRIPTION 就是说明这个东西是干嘛用的

3、generate的使用

主要用generate来对*.mib生成snmp.yml文件

generator使用说明(github)
generator下载地址(github)

若访问不了 github ,这已经打包好了,下载解压用就行:
snmp-exporter-main 集合包

下好后,按官方使用说明,把 NAS.mib 文件放到snmp_exporter/generator/mibs/ 下并编辑 snmp_exporter/generator/generator.yml 文件

modules:    qnap:        walk:            - raidCount            - raidStatus

PS:
qnap 是自定义的采集项名
walk 下的是要采集的信息(查看 NAS.mib 内容提取)

执行编译操作:

make docker-generate

PS:会联网下载github、构建docker镜像,生成 snmp.yml 文件

文件生成在:snmp_exporter/generator/snmp.yml
内容如下:

# WARNING: This file was auto-generated using snmp_exporter generator, manual changes will be lost.modules:  qnap:    walk:    - 1.3.6.1.4.1.55062.1.10.5.1.4    get:    - 1.3.6.1.4.1.55062.1.10.4.0    metrics:    - name: raidCount      oid: 1.3.6.1.4.1.55062.1.10.4      type: gauge      help: The number of RAID. - 1.3.6.1.4.1.55062.1.10.4    - name: raidStatus      oid: 1.3.6.1.4.1.55062.1.10.5.1.4      type: OctetString      help: The status of RAID - 1.3.6.1.4.1.55062.1.10.5.1.4      indexes:      - labelname: raidIndex        type: gauge

4、运行snmp-exporter

在生成的 snmp.yml 文件追加version、community等信息即可使用。

PS:snmp.yml 的具体格式和说明请参考 群晖 NAS编写 snmp.yaml 章节*

使用 docker 部署 snmp-exporter:

# 拉取docker pull prom/snmp-exporter:v0.26.0# 在台能访问QNAP NAS 的设备上运行docker run -d \  -v /path/to/snmp.yml:/etc/snmp_exporter/snmp.yml \  -p 9116:9116 \  prom/snmp-exporter:v0.26.0

IP + 端口号 在浏览器访问,Target 栏 输入群晖 NAS 的 IPModule 栏 输入自定义的采集项名,如,上面用的是 qnap,若能返回数据,则成功,否则检查IP地址、网络、采集项名等。

PS:若有疑问请查阅群晖 NAS运行snmp-exporter章节

5、加入Prometheus监控

修改普罗米修斯的 /etc/prometheus/prometheus.rules 文件,追加如下内容并重启服务。

  - job_name: 'snmp-qnap-nas'    scrape_interval: 5m    scrape_timeout: 3m    static_configs:      - targets:        - QNAP NAS IP1        - QNAP NAS IP2        - QNAP NAS IP....    metrics_path: /snmp    params:      module: [qnap]    relabel_configs:      - source_labels: [__address__]        target_label: __param_target      - source_labels: [__param_target]        target_label: instance      - target_label: __address__        replacement: 'IP:9116'

在浏览器访问 Prometheus ,点击 “Status” → “Targets” 中若能发现 “snmp-syno-nas” 栏,且设备数量对得上,State 为 UP,则代表已接入普罗米修斯监控了。


三、华为防火墙

1、开启 SNMP 服务

浏览器登录 华为防火墙 管理后台,点击 “系统” → “配置” → “SNMP” → 勾选“SNMP” + 勾选 “v2c” + 填写 “SNMP 只读团体名” 、“认证密码”、“加密密码” → 点击“应用”生效

这里不知道是我防火墙太旧还是什么bug,Web 页面配置就是不生效(你也可以先尝试上面方法开启),只能到进 控制台 去开启 snmp 服务:笔记本接防火墙Console 端口(RJ45 转 USB 或 DB9 转 USB 的线,9600 波特率)SSH 远程连接Web 登录打开 CLI 控制台 ,任意采用一种方式即可。

进控制台后命令如下:

system-viewundo snmp-agentsnmp-agent#重启snmp服务display snmp-agent community#查看之前的社群配置(加密了,所以显示乱码)undo snmp-agent community <community-string>#删除社群snmp-agent community read <社群密码>

2、测试

网络测试

开通ACL(没有则不做)、开通 SNMP 服务后。
在另一台设备(Linux)访问测试该端口号:

nc -zv -u <firewall-ip> 161# 返回如下信息就是正常,否则请检查网络连接# Connection to <firewall-ip> 161 port [udp/snmp] succeeded!# UDP 端口不能使用telnet测试

连接测试

该华为防火墙(UDP:161端口),使用 snmpwalk 命令测试,若没有这通过命令安装:
Centos/Redhat:

sudo yum updatesudo yum install net-snmp-utils

Ubuntu/Debian:

sudo apt updatesudo apt install snmp

测试命令:

snmpwalk -v 2c -c 社群密码 华为防火墙IP

若返回一大串 iso. 开头的信息,则表示正常,否则请检查社群密码、华为防火墙 IP

3、查阅文档

到 华为官方网站 上查找自己设备对应型号,点击左上角 “切换产品” → 输入自己设备的型号 → 点击 “MIB 查询” → 选择所对应 “版本” (在 防火墙管理后台可以看到) → 查阅文档

查看 “对象含义” 根据自己说需监控的信息提取 OID 。

PS:结果!!!坑呀,华为官网给我的文档一个 OID 都对不上!!!设备 + 版本我都选对的,不知道是不是防火墙太久了,用的人不多,文档就没人维护了

4、部署 snmp-exporter + Prometheus监控。

具体操作请查阅上方 群晖NAS编写 snmp.yml 运行snmp-exporter 加入Prometheus监控 篇章。

其他

报警规则、看板制作、消息推送,由后面的更新的Prometheus+Grafana的部署篇章中会详细说明。

目前,已更新的 Prometheus 及其相关篇章有:

深入 Prometheus 监控生态 - 第一篇:原理与架构详解深入 Prometheus 监控生态 - 第二篇:网络等硬件设备监控(snmp-exporter)深入 Prometheus 监控生态 - 第三篇:操作系统信息监控(node-exporter)深入 Prometheus 监控生态 - 第四篇:服务器硬件信息监控(ipmi-exporter)深入 Prometheus 监控生态 - 第五篇:利用 API 信息进行监控(NAS 备份任务监控 + 解决思路)深入 Prometheus 监控生态 - 第六篇:与 Grafana 实现系统全面监控(健康状态和任务状态看板)

点击全文阅读


本文链接:http://zhangshiyu.com/post/181533.html

<< 上一篇 下一篇 >>

  • 评论(0)
  • 赞助本站

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

关于我们 | 我要投稿 | 免责申明

Copyright © 2020-2022 ZhangShiYu.com Rights Reserved.豫ICP备2022013469号-1