Skip to content

破案:太勤快的扫帚 ​

第二桩大案的案情零零碎碎,咱们乍看毫不相干。busybox 的目录查找偶尔报输入输出错误,重试又好了。用户程序的段错误也偶尔冒头,没有什么规律。最狠的一次,内核自己在一次间接调用上缺了页,错误地址是零,经函数指针跳进了空地址。零星的火苗,东一处西一处地冒,复跑的时间一久,火苗就冒得勤了。这一类病最难的地方在于现场不集中:每处火苗单看都像别人家的错,只有把指令级的事实摆到一张桌上,火苗才连成完整的一片。

咱们摆事实。反汇编把两处现场拆到指令:文件系统的解析路径上,搬运两个指针的那几步,编译器借了 XMM0,十六个字节一条 SIMD 指令就搬了,又快又好的。块缓存的读路径上,同样十六字节的搬运,同样借的是 XMM0。间接调用炸零地址的那一帧,被调的指针确实是零。SIMD 是处理器里的一组宽寄存器,十六个字一条指令就处理了,搬小东西的活编译器爱交给它,这本身是没有任何病的。病要问的是:XMM0 里的好东西,是什么时候变成零的。

答案在咱们的中断入口里,这一段咱们得诚实地讲,因为肇事的代码写得很端正。懒到家那一卷立浮点闸门的时候定了家法:中断可能打断任何代码,包括正用着 SIMD 的代码,所以每个中断入口把被打断者的浮点现场存下来,出口的时候再恢复。这一卷新加的本地中断入口,本核定时器与核间中断的那两路,也是这么写的,而且写得更讲究:现场结构体带了大括号初始化,存之前清成了全零。讲究偏偏出了事故。清成全零的说法,在编译器眼里就是一次清零内存的调用,落到的正是内核自己的内存清零函数,而那个函数为了快,用 SIMD 的寄存器扫零。咱们把顺序连起来读一遍:中断进门,调清零函数把现场的结构体清一遍,清零用的正是 XMM0,然后才执行真正的保存,把当时的 XMM0 存了进去。存进去的是什么,是刚被扫帚扫过一遍的 XMM0。恢复的时候照样原样地恢复。被打断的搬运指令,前半截把好数据装进了 XMM0,中断绕了一圈回来,XMM0 里装的是零,后半截把零写进了目的地。

咱们把两个火苗就此对上号。文件系统的解析:指针搬运被打断,搬出去的是零,调用检查全都过了,返回值是正常的,指针偏偏是零,下一次经它调用就成了零地址跳转,正是内核那一次的缺页。块缓存的读:十六字节的目录头被覆成了零,目录项的长度字段是零,文件系统就读不懂了,报出了输入输出错误。全对上了。这一案还有个配角值得记:病根长在本地中断的那两路入口上,头核的执行流从来不会走它们,本核的定时器只在第二颗核上跳,核间中断只在多于一颗核的时候发。所以单核镜像怎么跑都是绿的,那些入口头核的执行流一步也没踩过,单核的世界压根不会路过那里。宿主的长凳上也一样抓不到:长凳世界没有中断入口,也没有浮点保存的路径,这一案在长凳上结构性红不了,只能在机内的测试内核里红,所以哨兵案也安在那边。

修法咱们选了不迁就的一条路。头一个念头是删掉那个大括号了事,让结构体保持不初始化的样子,可这等于让安全检查给猜测让了路,哪天编译器换个法子又摸回了 SIMD 呢。真正的章法是:凡在浮点保存之前可能被执行的代码,一律不许碰 SIMD 的寄存器。内核里早就有这么一座编译岛,异常与中断的骨架一直住在里面,编译旗这么一立,这个岛上的一切只用通用寄存器。修法就是把内存原语里的清零、复制、搬移那几件,编进了这座岛。从此不管哪个编译版本用什么优化,清零函数物理上就发不出 SIMD 的指令。咱们把清零的那一笔初始化照旧保留,它本身是没有罪的,有罪的是落点,落在了中断入口这个位置。咱们不写压住告警的特赦注释,也不关掉盯着未初始化缓冲的检查。这里还挨过一记小弯:头一笔改动把编译旗指错了源文件,报错的红例还在,核对符号的真实出处之后才指对。指错了的改动咱们作废重办,两次都记进了案卷。

证据咱们要红绿两份,这是这一案与上一案不同的讲究:上一案修完复跑通过就算数,这一案的病藏得深,咱们要一份确定的红。案子的红版:双核各自把 XMM0 装上固定的非零哨兵值,然后主动触发那两路本地中断,一路核间中断的向量,一路本核定时器的向量,中断跑了一趟回来,回读 XMM0 的值,断言的内容与哨兵一字不差。这桩案在旧镜像上跑出来的,是确定的红,回读到的全是零,证明的就是扫帚确实扫过。修复之后同一桩案交出的答卷是绿的。修复前后清零函数的反汇编各存一份,看得见 SIMD 指令的一份,怎么也看不见的另一份。在只读的审查里把指令链证明了在前,红绿的落地在后,写进案卷的没有一处猜测,这两拍的次序也是案卷的一部分。

单核的日子里,咱们的中断入口不上岛也出不了事,因为能打断搬运的那些路径,老入口一个都没多想地避开了,侥幸的事没人过问。多核把两路新入口搬进了同一条街,扫帚扫到了别人家门口。编译岛的边界不是一劳永逸的,今后咱们每加一条新的中断入口,都要重新数一遍岛上住着的是谁。下一章咱们收卷验收。

r35_gui_fin-8-gdda97be · dda97be · 2026-10-31