压力测试(stress-fleet 常驻并发测试集群)
以高负载与随机化测试跨并发 QEMU 集群覆盖各异常类 —— 设计文档 docs/test/stress-fleet.md
常驻压力测试集群的目标异常类:野指针写(捕获链武装哨兵)、panic/挂死、泄漏、fake-OOM 复发、调度病理、负载下性能漂移(对照 docs/development/perf-gate-baseline.md)、数据损坏。探针位于 test/stressng、test/cowrace。
§1集群构成
| 成员 | 类型 | 负载内容 |
|---|---|---|
| chain ×2 | 野指针写捕获链 | 自推进捕获内核 + 负载链(冻结、不重启,见 wildwrite-hunt.md) |
| ltp-a/b/c/d | LTP 扫描实例 | riscv64 TCG smp2/2G,随机起点 LTP 全量扫 |
| monkey-a/b | 随机化测试实例 | x86_64 KVM 4G,usbless OH 镜像 + 随机扰动(存储热插拔、hilog 洪泛/轮转、appspawn 杀重启、bm/hidumper/param 走查、sync) |
| memstorm | 内存风暴 | mmap/munmap/MAP_FIXED/mprotect/fork 风暴,debug=periodic,memwatch,watchdog |
| fsfuzz | 文件系统模糊 | 随机系统调用 fuzzer + 文件/管道/套接字/madvise/fork 序列 |
| ltpm | 对照实例 | 当前 main 内核上的 LTP 扫(工作树 vs 主线漂移对照) |
- 轮次机制:每轮 1800 s,串口落盘,分类线(决定性 CRITICAL > WARN > WEDGE > clean);停滞规则:串口 ≥300 s 无增长 → 终止、标记 WEDGE、保留日志尾部。
- 宿主预算纪律:集群规模自适应,下限约束 ≥10 GB 空闲内存(每步 launch/ramp 前
free检查);QEMU nice +10;共享镜像只-snapshot/snapshot=on+file.locking=off,可写盘用私有 reflink 拷贝。 - 规模常态:2 链 + 9 成员 = 11 台 QEMU,30 分钟中央巡检(sweeper)守护。
§2已根因闭合的类(已根因闭合的异常类)
- SIGILL 家族(内核 bug,已修):read_counter() 用写形式
csrrw a0, time, zero读只读 CSR → 整条指令非法;mount 压力循环 ~100 s 内必现(与工具链 zcb 无关,双实例确证)。修复为规范读形式csrr。 - 七个用户态长度上取整溢出(已修):fsfuzz r172 以 madvise length=−1 触发
attempt to add with overflow(syscall/memory.rs);madvise/mprotect/msync/mremap/mincore/mlock/munlock 全部补上回绕检查(EINVAL,Linux end-wrap 语义);修复后确定性种子流 150 s+ 零 panic(v4 活不过 60 s)。 - 零服务家族(排除):virtio/bio 完成路径重写前后,集群 LTP 扫描逐轮一致(r18/r19 同为 1253/1254 TPASS;21 处 ENOENT 均为预期 errno 的 TPASS 行)—— 重写在该表面零成本。
§3在观察的已知类(当前台账)
- fsfuzz WATCHDOG 族(perf 注册表 static+heap 锁对):r282 曾录零 DEADLOCK 打印(该类首次,45,858 行),r283 复现 118 次 —— 同族同 ra、静态锁地址随新二进制移动;修复未上 main 前按已知瞬态类记账,闭合等 c5640ccc 类落地。
- oom01 fake-OOM(根因已锁定):直接回收路径已合入(page_alloc 深末轮,39a515a5),但 OOM 击杀来自 kswapd 升级路径(连续 16 次零回收 balance_pgdat → out_of_memory),该路径没有深排水。证据:OOM-FORENSIC 显示 in_direct_reclaim=1、zone 内 172 MB 干净页缓存一链之隔、全程零 OOM-DEEP-PASS 行;对照组 r35 无改善亦无回退。s17 设计(kswapd 升级点单次深排 + 成功重置失败计数)待 mm/perf 工作分支实现。
- W3 停滞类:oom01 SIGKILL 送达后串口静默 —— s17 形状,归 W3/OH 工作分支所有。
- monkey-b / memstorm 实例状态:monkey-b 实例 x86 轮全 WARN、零 critical 旗标,r7–r10 余量增长 141–178 MB 属判据内;memstorm r34 PREEMPT-UNDERFLOW=8(trio 族带 6–10),beat 86 对带 91–97,连续观察后再定性。
§4测试队列
- fsfuzz 累积;修复类抵达 main 后跑闭合轮;
- kswapd 深排水改造移交 mm/perf;
- 调度事件普查 r20+ 逐轮稳定性 + monkey-b 大堆轮观察;
- memstorm beat 带在 r35/r36 裁决。