Skip to content

Busybox execve 的 EIO 误报与 SIGCHLD 返回崩溃 ​

2026-10-17,使用 musl 静态 busybox 1.38.0(1214352 字节)、单核 x86_64、 QEMU KVM 和 AHCI/ext2 排查。修复前的隔离代码保留了已有未提交修改,包括 Completion 入队前设置 blocked 的修补,便于与本次修改对照。

本次抓到的 EIO 在文件查找与错误映射层 ​

用户给出的自动复现步骤只把 busybox 写入 /bin/sh,启动参数却执行 /bin/busybox uname。这两条镜像命令没有创建 /bin/busybox。

按此条件在隔离镜像和修复前内核中复现,GDB 在 ReadWholeFile 的失败分支抓到:

text
view.rest = "bin/busybox"
kNode.is_ok_ = false
kNode.internal_storage_.error = kNotFound
ReadWholeFile returned false
HandleExecve returned -5

FileWorld::resolve() 成功只表示找到了挂载后端,并不保证目标文件存在。 ReadWholeFile 原来把 lookup、stat、分配和 read 的所有失败压成 bool,exec 统一返回 EIO。本次现场在 lookup 就结束了,尚未进入大文件块读取。

修复:ReadWholeFile 返回 Result<void>,保留 lookup/stat/read 的原始错误; 成功但短读仍返回 kIOError。exec 使用 ErrnoFrom 映射,同时补齐 kIOError -> EIO 的映射。缺失路径现在返回 ENOENT。

这证明了上述自动复现条件下的 EIO 来源;不能把它当作所有历史读盘失败的证明。 对实际存在的 1.2MB ELF,最终另做连续 fork/exec 验证。

父 ash 的 SIGSEGV 来自信号返回 ​

即使给 /bin/busybox 创建链接、子命令正常输出 Cinux,修复前的父 ash 也会退出为 11。KVM/GDB 的调用栈为:

text
Scheduler::exit_current(11)
HandleRtSigreturn
InvokeSyscall
SyscallEntry

信号投递把保存的上下文放在 handler 返回地址上方。handler 执行 ret 后, RSP 正好指向上下文本身;sigreturn 却再次解引用,把保存的原始 user_rsp 当作另一个上下文指针,因此校验失败或恢复错误寄存器。 原来放在返回地址下方的上下文指针还会被 handler 的普通压栈覆盖。

修复:sigreturn 直接从入口 user_rsp 读取上下文,移除下方指针槽, 投递时保留被中断函数的 128 字节 red zone,并修复栈窗口检查的无符号下溢。 rt_sigaction 的记录也改为 musl 使用的 x86_64 顺序: handler、flags、restorer、8 字节 mask,共 32 字节。

信号上下文仍采用教学内核自己的格式,投递使用内核 trampoline;本次没有实现 完整 Linux SA_SIGINFO/ucontext 信号帧。

同路径修补的两个竞态 ​

  • Completion 原修补仍允许在释放 spinlock 后、block_current 前收到完成中断。 Mutex、Semaphore、futex 有同类窗口。现在用外层 IrqGuard 覆盖谓词检查、 等待入队和实际 park;切换前释放 spinlock,由调度器提交 blocked 状态。
  • BlockCache::view 返回裸指针时已解锁,ext2 随后复制前可能被抢占并遭遇槽替换。 增加锁内复制的 read 接口,ext2 的超级块、数据/间接块和位图读取全部迁移。 原 view 接口保留给受外部串行保护的调用者,明确说明没有 pin。

这两个竞态有源码依据,但本次没有把它们标记为已捕获 EIO 的直接根因。 AHCI 每次缓存填充只接收 8 个 512B 扇区,文件总块数不是单命令长度。

验证与复跑 ​

  • 宿主测试:52 个测试目标全部通过,新增错误传播、短读、信号返回、 red zone、sigaction 布局和缓存复制回归。
  • KVM 内核测试:调度/fork 30 例、块设备/缓存并发 3 例、ext2 8 例全部通过。
  • KVM busybox:连续 20 次 fork/exec 1.2MB ELF;hello 退出码 42,false 退出码 1, 缺失路径状态 127,父 ash 最终退出码 0,无 EIO 或 SIGSEGV。

新增缓存测试还发现旧块设备测试只调用一次 run_until_done,就释放了仍被阻塞 worker 使用的局部队列。现在明确等待三个 worker 全部结束,避免异步 I/O 继续写入已释放缓存并覆盖后续任务。

复跑命令(先构建 boot_image 和 ext2_img,运行环境需要 KVM 权限):

sh
python3 scripts/test_execve_busybox.py \
  --busybox /tmp/busybox-1.38.0/busybox --rounds 20

脚本复制启动盘和文件系统到独立临时目录,创建 /bin/busybox,通过 GDB 注入一次 sh -c 参数,并检查命令结果和父进程退出。源码中的 init argv 保持正常的 {"/bin/sh", nullptr};日志留在脚本输出的 /tmp/cinux-execve-*。 TCG 必须显式指定 --accel tcg,不会静默替代 KVM。

续查:根目录块在 fork 后疑似读到其他页 ​

用户后来报告同一 LBA 74 的目录缓冲在不同 respawn 中内容不同。这是新的 数据完整性线索,不能用前述 /bin/busybox 缺失解释。目前尚未在本地捕获 这一原始故障,现有修补不能据此宣称已经解决它。

当前源码和 ELF 的 AHCI 路径均为 DMA 到专用 data_page_,完成后 CPU 复制 到缓存槽,随后 BlockCache 在 Mutex 内复制到调用者。独立 KVM 在根目录页 读取完成、驱动复制前实测:

text
Target .text MATCHES build/kernel/cinux_kernel (108610 bytes)
CLB=0x113000 CTBA=0x113400 bounce_pa=0x115000
CI=0 IS=0 TFD=0x50 PRDBC=4096 PRDTL=1 write=0
FIS type=0x27 opcode=0x25 LBA=72 sectors=8
PRDT[0] DMA_PA=0x115000 bytes=4096 equals_bounce=True

这确认当前构建没有直接 DMA 到堆缓存槽;仍需在用户已有 GDB 会话中核验运行 代码。已有 QEMU 于 22:37:56 启动,镜像生成于 22:37:48,镜像中的 kernel.bin 与当前构建一致,但启动时间和磁盘文件比对不能代替运行内存比对。

现场辅助脚本留在 /tmp/cinux-dma-audit.gdb 和 /tmp/cinux-cache-first-bad.gdb。前者只读比对 ELF 的 .text 虚拟地址与目标 内存,并从控制器 CLB 追到实际 PRDT;该内核的物理加载地址与虚拟地址不同, 不能直接把 compare-sections .text 的结果当成版本结论。后者仅适用于当前 ELF,带 SHA256 保护,在 BlockCache::read+338、复制完成且尚未解锁时检查 根目录块偏移 0x40 的 bin 三字节,异常时保存实际源/目标地址、锁 owner、 当前任务与槽元数据。重编后必须重新确认指令偏移和寄存器布局。

附加验证:开启上述条件断点的 5 次 KVM fork/exec、hello、退出码与 SIGCHLD 返回全部通过;50 次尝试因 GDB 每次读取都检查条件而在 90 秒超时,不能计为 50 次通过。在另一份独立虚拟机中注入错误缓存字节,首错脚本成功停在解锁前, 同时显示源、目标损坏和相同的 Mutex owner/current。这验证了诊断脚本, 不是对用户原始故障的复现。

r35_gui_fin-7-gcb9e24e · cb9e24e · 2026-10-30