可观测性与稳定性 / 系统课时

绘制服务器网络流量

绘制服务器网络流量

服务器网络面板最重要的是把网卡累计字节数转换成实时速率,并明确接收与发送方向。完成后可以直接看到各网卡的入站、出站流量趋势,并从曲线中识别流量突增、持续高负载和异常网卡。

学习目标

  • 使用 node_exporter 网络 Counter 计算接收和发送速率
  • 在 Grafana 中正确设置网络吞吐单位和图例
  • 根据时间窗口识别持续流量与短时突发流量

计算网卡接收速率

node_network_receive_bytes_total 是网卡从启动以来累计接收的字节数。累计值只会不断增长,本身无法表示当前带宽,因此需要使用 rate() 计算一段时间内的平均增长速度。

promql
rate(node_network_receive_bytes_total{device!~"lo"}[5m]) * 8

预期结果

text
返回每个非 lo 网卡平均每秒接收的比特数,时间序列通常按 instance 和 device 标签区分。

这里乘以 8 是把 Bytes/s 转换成 bits/s。Grafana 面板单位可以设置为 Bits/sec (SI),这样会自动显示 kbit/s、Mbit/s 或 Gbit/s。

对于服务器来说,Receive 表示数据进入该主机,可以理解为该网卡的入站流量。它并不一定等同于业务语义中的“用户下载”,判断方向时应始终以被监控主机为参照物。

计算网卡发送速率

发送方向使用 node_network_transmit_bytes_total。处理方式与接收指标相同:

promql
rate(node_network_transmit_bytes_total{device!~"lo"}[5m]) * 8

预期结果

text
返回每个非 lo 网卡平均每秒发送的比特数,可与接收速率放在同一个 Grafana 时间序列面板中比较。

Transmit 表示数据从服务器经网卡发出。如果服务器主要提供文件下载或 HTTP 响应,发送速率往往高于接收速率;如果服务器主要接收备份、日志或上传数据,则可能相反。

在 Grafana 中可以把 Receive 和 Transmit 设置为两个查询,并使用 instance 与 device 组成图例。对于包含 Docker、虚拟网桥或容器网络的主机,可能还会看到 veth、docker0 等接口,应根据监控目标决定是否保留,而不是一律删除。

识别突发流量

rate(...[5m]) 会对五分钟窗口取平均,因此曲线较平滑,适合观察持续带宽使用。如果需要分析持续时间很短的突发流量,可以缩短时间窗口,但窗口越短,曲线也越容易受到抓取间隔和瞬时变化影响。

判断异常时不要只看某一个瞬间的峰值。更有价值的信号包括:某张网卡的入站或出站速率突然比历史水平高很多、峰值持续时间异常增长、流量在业务低谷期持续处于高位,或者只有某个实例出现明显变化。

让面板更容易排查问题

网络面板至少应让读者立即回答三个问题:哪台服务器、哪张网卡、哪个方向发生了变化。建议一个面板同时展示 Receive 与 Transmit,单位统一使用 bits/s,并通过图例显示实例和设备名。

如果仪表盘包含多台主机,可以增加 instance 变量筛选服务器。出现突发流量后,先确认变化发生在哪张网卡和哪个方向,再结合应用请求、连接数或系统日志定位来源,比只根据一条“带宽很高”的曲线判断故障更可靠。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

绘制服务器网络流量

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通