fio 3.36
§1数据(同机同镜像同二进制对照)
两侧使用同一 ext4 镜像、同一静态 fio 3.36 二进制、同一作业文件,Rux(main release)与 Linux(同镜像 guest 内核 7.0.0-38)于同一测试平台(q35/KVM/-cpu host/SMP8/8G,virtio-blk;交替启动测试 3 轮取中位数)执行;direct=1 绕过页缓存。每行取最新实测值;同一测量窗口内内核对内核比值随宿主负载窗口两侧同浮动(±10% 级),比值只在同一测量窗口内有意义。无数字的引擎行即当前不可用。
| 作业 | Rux | Linux(同机) | 比值(Rux/Linux) |
|---|---|---|---|
| 4k 随机写 8M + fsync=1(持久化路径,15 s) | 20.1–22k IOPS | 15.3–16.2k IOPS(fsync 中位 ~57 µs) | Rux ~1.24× 领先 |
| 4k 随机读写 40M(direct,50/50) | 22.15k/22.15k IOPS | 22.0k/22.0k IOPS | 0.96×(平价范围) |
| 4k 随机写 40M(direct) | 36.75k IOPS | ~37.9k IOPS | 0.97× |
| 4k 随机读 40M(direct,20 s) | 37.0k IOPS(单作业)· 8 作业 0.91× | ~41k IOPS | 0.90×(单作业) |
| 1M 顺序写 48M(direct,已分配区域) | 4000 MiB/s | 5.2 GiB/s · clat ~188 µs | 0.83× |
| 1M 顺序写 48M(direct,全新文件) | 4000–4800 MiB/s(中位 4000) | 5.2 GiB/s(两种场景同值) | 0.75–0.9×(已追平覆写) |
| 1M 顺序读 48M(direct) | 8000 MiB/s · 每 op 请求数 4→1 | 9.4 GiB/s · clat 90 µs | 0.83×(合并+SG 链) |
| 1M 缓冲写 48M(页缓存口径,两侧同) | 11.7 GiB/s · clat 78.4 µs | 9.4 GiB/s · clat 89.5 µs | Rux 1.19–1.25× 领先 |
| 128MB 刷盘墙探针(mmap 全同步回写,总墙钟) | 待重测 | 1.223 s(旧口径) | — |
| libaio(io_setup/io_submit) | — | 有 | — |
| io_uring(5.1 ABI enter 契约) | — | 有 | — |
注:全新文件顺序写行已追平覆写行,机制为未写盘区异步转换+延迟分配预留落地。缓冲写行:冷帧 RFO 两侧共付证明 2× 目标不可达;曾经的 ~6% 差距已由区域化批量分配收清(分配项 55k→14k 周期/op,每页 4 次共享行锁写改为每批一次),现领先 1.19–1.25×。顺序读行的差距由请求合并+SG 链收窄。刷盘墙探针待 SMP8 下一次启动重新测量(fsync 路径已重造)。4k 随机读行的 0.90× 为单作业口径,8 作业时 0.91×。无数据行:libaio 为 UAPI 未实现(io_setup ENOSYS);io_uring 的 enter 契约触发用户态崩溃(环形语义未完成)。posixaio 引擎可运行,其吞吐读数并入扩展作业队列。作业尺寸上限(48M)由镜像剩余空间约束,两侧同约束。
§2优化方法
差距归因用两侧同机对账(两内核在同一镜像/负载下,用共享 tracefs 事件时间线 + 相位周期括号 + 双方 perf 把每 op 成本逐段对账:系统调用入口/块解析/提交+kick/设备/完成中断/唤醒/返回),再按 Linux 的实现形态逐项改造:直读路径按物理连续段批量提交;MSI-X + 完成处理内联硬中断向量;同步等待先有界轮询后睡眠(完成对象是纯内核值,深度 1 时整套睡眠机械比设备往返还贵——Linux 同取舍,仅 opt-in);未写盘区成批转换+邻接合并(每写跨度一次树编辑);每 inode 脏块笔记 → O(dirty) fsync 扫描(tagged page tree 类比)+ inode 表块搭同一刷写窗口;缓冲写用户页直拷入页缓存帧(copy_page_from_iter 形状);目录读取增量填充;路径/描述符成本(close 条件引用获取=fget_rcu 形状、readahead 状态内嵌 File);地址空间回收释放空页表。每项改造同机同镜像同二进制 A/B;负结果留档(MSI 目标重定向在本 QEMU/KVM+irqfd 下为死胡同)。方法与逐项证据见 docs/test/perf-campaign-2026-11-17.md。
§3测试平台与方法
- 对照组:Rux(main release)vs Linux(同镜像 guest 内核 7.0.0-38),同一 QEMU q35 + KVM(
-cpu hostSMP8/8G),同一 ext4 镜像(reflink 拷贝,snapshot 启动),同一静态二进制(源码 tar 包入 git,userspace/fio/build-x86.sh 构建);交替启动测试 3 轮取中位数。 - 协议:每侧一次启动顺序执行全部作业(qsrun cmds 协议);fio terse 单行输出进串口采集,含 bw/IOPS/延迟字段。
- 口径:direct=1 行为真实设备路径;缓冲写行为页缓存吸收口径(两侧同);比值只在其会话内有意义。
§3扩展
# 追加作业:userspace/ci/classes/ 下新增 .cmds(行格式:<预算秒> fio --name=... --filename=/test/qa/...)
# 双侧对照:run/bench-pair.sh(Rux 侧 + Linux 侧,同镜像同 cmds)