Skip to content

Master CI red storm after the #4525 train merge: 3 untracked test failures keep every test lane red #4591

Closed

Description

@ranxianglei

来源: #4555 (#4555) 分析 epoch-confirm/escalation 测试红、验证其修复 PR #4569 的 CI 时发现。

查重: 按失败签名(测试名+关键错误行,不只标题措辞)检索 open+closed issues 与 PRs——域 A("1111 bytes"/error-dump/#4297)、域 B(GENERATION_BOUNDARY_NOTE/generation-boundary/#4305):无任何跟踪条目(#4305/#4308 为已关功能票);域 C("older than kernel/src"/pretest cache/mtime):#4541(已关)、#4548(已关无评论)、PR #4549(已关未合)存在,但经实测当前 master 的 scripts/ci-pretest-cache.mjs 中 utimes/touch/mtime 逻辑为空(grep 确认),tip d95799d 仍红 → 既有条目实际未解决,故合并立项并在此重列证据。

现象

自 2026-10-24 ~10:31Z(#4525 train 合并窗口)起,master 所有测试道持续红,每个 PR 的测试道同样携带这些红。本 issue 立项时 tip d95799d 的 CI:7 failed / 1 success / 3 in-progress(test shards)。除 #4555 的 epoch-confirm 家族(PR #4569 已修,不在此列)外,还剩多个互不相关的失败域,各自都足以让全部 ubuntu/windows leg 红、淹没合并判定(#4555 的验证就不得不逐 shard 人工核对目标测试)。立项时列了 A/B/C 三域;随后逐 shard 核对 PR #4569 rebase head(ea9c2d5)的全部失败日志时又发现 D/E 两域,一并补入——合计 5 个独立机制。

子缺陷清单(同症状「master 测试道红」,机制各异)

A. error-dump 最终字节上限不再执行(#4297 家族回归测试红;eb483c6b3 出生即红)

B. generation-boundary 激活态 note 缺失(#4305 家族回归测试红;abf7d0012 出生即红)

C. stale kernel dist mtime 守卫仍在触发(#4541/#4548 家族;修复早已写好但从未落地)

D. judge render-baseline 出口缺陷检测不再触发(#4241 家族回归测试红;train 窗口内回归)

E. publish redaction 的 $HOME→~ 掩码在 Windows 失效(#4427 家族,win-only 红)

  • 签名:not ok ... #4427 maskPathsForPublish rewrites this machine's $HOME to ~, anchored on both flanks — actual /home/alice/.local/share/billion-context/x.db,expected ~/.local/share/billion-context/x.db(tests/web-storage-diagnostics-redaction.test.ts;win 22,5 not ok 1515/1516/1517/1519,同文件 4 个用例)
  • 本地复现:linux @ d95799d 同文件 5/5 绿——仅 Windows 红,linux 无法复现
  • 机制(推断,待处理会话确认):maskPathsForPublish 解析 home 的方式在 Windows 上没吃到测试注入的 env($HOME vs USERPROFILE/os.homedir() 平台差异)→ 掩码不触发;若属实,生产影响 = Windows 机器上 publish 的诊断 blob 可能泄漏 home 路径([security][web] Storage diagnostics publish raw log lines and absolute paths | 存储诊断公开报告泄露本地路径和未脱敏日志 #4427 要防的事)
  • 修法方向:home 解析统一走 process.env.HOME || os.homedir(),或在测试里同时注入 USERPROFILE 以钉住跨平台契约(先确认实现意图再选)

影响

零用户侧运行时影响(A/B/C/D 均为测试道;E 若推断属实则有 Windows 生产影响面,优先级应上调),但阻塞一切合并判定:每个 PR 的 CI 测试道携带这些红,合入前必须人工逐 shard 甄别目标测试;master push CI 全红。默认打 p2;若 owner 认定「阻塞全部合并 = 可用性停摆」可升 p1(#4548 当时自评 p1)。

建议处置

  1. C 优先(cherry-pick 级,解锁面最大):候选提交 2b8d0be / c775203 如上;
  2. B 疑似一行测试修复,可最先顺手做;A 需改上限计算(对最终字节强制 cap,两个 writer 都钉住);
  3. D 需要二分定位 train 窗口内的肇事提交(范围小:judge/render-baseline 触碰者),E 需要 windows 定向复现;两者互相独立,可与 A/B/C 并行;
  4. 五项与 epoch-confirm latch semantics: train a5d1994d test born-red (all-missing) + regression of 2915 escalation-latch-recovery — owner decision needed #4555 共享同一根因类「train 的 CI legs 被取消 → 出生即红/窗口内回归漏网」——建议 owner 评估是否在 train 合并流程加阻断(例如合并前强制跑一次完整 test legs,或禁止 cancel)。
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions