面板版本:宝塔 Linux 面板 13.2.0
系统版本:Ubuntu 26.04.1 LTS,x86_64,内核 7.0.0-43-generic
浏览器版本:Google Chrome 157.0.8103.40(macOS)
Docker 版本:29.9.3
后台采集进程:Go 版 BT-Task
问题现象:
面板「监控 → 网络 IO」选择「全部」、单位选择 KB/s 时,偶尔会出现约 2.99 × 10^14 KB/s 的上行或下行尖峰。由于纵轴被异常值拉高,正常网络流量曲线几乎被压成一条直线。
这些异常值已写入监控数据库,不会通过刷新页面消失。同一采样点保存的外网网卡速率正常,异常主要出现在「全部」接口的汇总速率中。
目前在保留的监控记录中定位到 7 次类似异常,每次都伴随旧 Docker veth 接口消失、新接口出现。
重现方式:
1. 环境中使用 Docker bridge 网络,让测试容器运行一段时间并产生网络流量。
2. 打开面板「监控 → 网络 IO」,选择「全部」,单位设为 KB/s。
3. 重启该测试容器,使其对应的宿主机 veth 接口被删除并重新创建。
4. 等待后续约 1 分钟的采样,检查「全部」网络 IO 图表及监控数据库中的 up、down 字段。
不是每次重启都会触发。根据已观察到的记录,当旧接口移除后,当前所有接口累计字节数的总和低于上一采样点时,可能出现上述尖峰。
排查结果:
1. 实际后台采集程序为 Go 版 BT-Task,可执行文件是 /www/server/panel/bt-task.run。
2. 异常采样前后,网卡集合发生变化,全部接口的累计发送或接收字节数总和出现下降。
3. network 表的 up、down 汇总速率出现极大值,但同一记录中保存的逐网卡速率仍在正常范围。
4. 内核日志中的旧 veth 接口注销、新接口加入 Docker 网桥的时间,与异常采样时间对应。
初步分析:
现象与 64 位无符号整数差值下溢高度吻合:如果先对当前所有接口的累计字节数求和,再用 uint64 直接执行「本次总数 - 上次总数」,网卡删除造成的负差值会回绕为接近 2^64 的大数。
再除以约 60 秒的采样间隔和 1024,所得数量级约为 3 × 10^14 KB/s,与实际异常值接近。建议官方核查 Go 采集器中累计流量求差及网卡生命周期处理的相关逻辑。
预期表现及建议:
容器重启、网卡新增或删除、计数器重置时,网络监控应保持合理数值,不应产生接近 2^64 的异常增量。
建议逐网卡计算增量,处理新接口、已删除接口及计数器回退后再汇总,避免直接对变化中的全部网卡累计总数做无符号减法。同时希望提供已入库异常采样的清理或修复方式,恢复图表可读性。
临时规避:
查看外网流量时,选择具体外网网卡,暂不使用「全部」汇总视图。但该方式不会修复已存储的异常汇总数据。
附件:仅保留网络 IO 图表的脱敏截图,已去除地址栏、服务器标识、账号、业务信息和具体采样时间。
请官方协助确认并修复,谢谢。
|
|