Skip to content

[bug] Fold anchor detaches after host restart (parent-gone): hydrated and unified-shadow DIGEST DRIFT within the same second, gap solidifies without self-healing (0.1.197, complementary to #3013 restart path) | [bug] 宿主重启(parent-gone)后 fold 锚点脱锚:hydrated 与 unified-shadow DIGEST DRIFT 同秒,缺口固化不自愈(0.1.197,与 #3013 重启路径互补) #3285

Closed

Description

@Betsy20

(ai: zhipuai-lb/glm-5.3)

收口:重启交接脱锚 → DIGEST DRIFT 永不愈合已修复并随 v0.1.198 发布。

Activity

  1. ranxianglei commented on Oct 15, 2026

    @ranxianglei
    Owner

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    查重:不重复。 与 #3013(上游路由切换触发)、#2438(韧性缺口设计)同症状家族(fold 覆盖缺失),但触发路径不同(宿主重启交接),且本 issue 携带一个此前无任何条目的独立缺陷面(unified shadow DIGEST DRIFT)——已检索 open+closed issue/PR,该面既无 issue 也无在途 PR。#3013/#2438 保持打开,本 issue 单独跟踪。

    收到,已按版本优先原则在 v0.1.197 tag 上逐段核对代码(不是对着 master 猜),三个面的初步结论如下,①面的修复正在做。

    ① DIGEST DRIFT 与脱锚不共享起源(回应建议 4)——已验证

    shadow 模式下所有会话读取都走 legacy 文件:src/persist.ts 的全部读取点被 readsUnified 门控(只有 full 模式为真,v0.1.197 src/storage/shadow.ts:115),index.db 在该模式下纯诊断写入。所以 DIGEST DRIFT 是独立告警,不是脱锚的原因。

    但 DIGEST DRIFT 本身是真 bug,机制已定位,且印证了你怀疑清单的第 1、2 条(旧实例还占着端口、两个 build 共存):

    • 重启交接窗口内新旧两个进程同时向同一个 index.db 写入——你日志里 03:53:18.143 旧实例(pid 9132,监听 launcher 41464)的 parent-gone flush 与 03:53:18.526 新实例 listening 重叠了 2s+;
    • unified store 的 ingest 存在跨进程信任漏洞:(a) 水位线 last_ingested_seq 是「前缀已验证」的凭证但没有写入者标识,新进程直接继承旧进程的信任,对没验证过的前缀走空 delta 快速路径;(b) 全量路径对 messages 表是 INSERT OR IGNORE + 身份保序 remap,从不清理不在当前视图里的行——旧进程留下的孤儿行永久存活(blocks/refs/dead_refs/ccr 四张表都是「权威集合、先删后插」纪律,唯独 messages 例外);
    • 结果:新进程首存即 digest 校验失败(首个 ingest 必验,所以 03:53:21 立刻报),第二次重启(15312→17736,同 build)同机制复现。另外 master 上已有的半截自愈(fix: per-session ingest watermark — storage saves cost O(new messages), not O(full log) (#3133) #3166 review,b9e82f641:drift 时清水位线)也不够——清掉水位线后的全量重灌仍保留孤儿行,漂移照样固化。

    修复方案已定:打开 index.db 时重置全部水位线(信任不跨进程继承)+ 全量路径对齐 blocks 的权威集合纪律(清理身份不在当前视图的行并释放其 CAS 引用)。回归测试直接模拟双进程交接场景。PR 稍后给。

    ② fold 脱锚面:机制核对完成,还差你两条日志证据

    • 「缺口固化不自愈」在消息确实从客户端历史消失的前提下是诚实稳态而非 bug:v0.1.197 的恢复通道(positional resync / toolCallId / twin / simhash / order bracket / turn-key)只能认领「换了字节但还在」的消息,认领不了「没了」的消息——误归属代价最高,设计上宁可展开重发。8 小时恒定 80 个 id 正符合这个形状。
    • 但 ERROR 级别过重是检测质量问题:升级条件只看 claims==0 ∧ ≥10 个非 reasoning unmatched ∧ 连续 3 pass,没有比例下限——80/~8500(0.9%)也 latch「substrate appears destroyed」。此项归入 [resilience] Preflight compress/timeout loop on sustained mass fold-coverage loss has no graceful degrade #2438 F1 入口门槛的证据(latch 语义属待拍板设计域),不另开 issue。
    • 需要你确认两件事才能钉死触发源(bili 侧日志无法区分下面两种情况):
      • Q1. 这两个会话在 10-15T03:53 第一次重启之前有没有出现过任何 [acp-drift] / [fold-reconcile] 行?(决定缺口是重启引入的,还是重启前已有、只是这次才注意到)
      • Q2. DSH Desktop 重启后会话历史怎么重建——从它自己的 store/checkpoint 恢复(可能丢轮次),还是重新序列化(图片等多模态内容可能换编码)?session-a44cc95c 那次有 16 个 order break,指向结构性删改而非纯字节重编码。

    ③ #987 窗口判定面:按设计工作,非污染

    v0.1.197 src/server/relay.ts:674:overflow-arm 是一次性武装——把上游自己声明的窗口(100000)写进本次会话的紧急收缩基线,代码注释明确「nothing persisted/learned」「declared window unchanged」,下一次成功请求的真实 usage 报告即覆盖它。100000 正是网关对该模型的真实上限:400 原文 100001 tokens > 100000 maximum 是上游自证,且此前 ~100K 的请求一直通过。nudge 显示 872000 分母是 runtime-info 声明窗口(按设计刻意不变),preflight 用 100000 判定——双分母是有意设计(#987),读起来易混淆但不构成缺陷。你的建议 (3)(拒绝数量级更小的上游声明)反而会伤害「网关配额小于模型标称窗口」这类合法场景,不建议采纳。该会话在 deepseek 路由下 737K est 远超 100K 上限且最多省 35K,fail-fast 502 是正确行为——换 glm-5.3 后立即成功也印证这是每模型的网关配额差异。

    ④ 建议 (1)(2) 的处置

    (1) 告警关联:既然已证实两者不同起源,不做告警合并;漂移文案里「host-native compaction」默认猜测的误导问题并入 ② 的比例下限项处理。(2) 重启后锚点自检:不需要单独机制——fold 锚点本来就只存在于各进程从 legacy 文件加载的状态里,不跨进程继承;①修好后统一存储侧也不再有跨进程脏数据。

    接下来:先出 ① 的修复 PR(无决策依赖部分先行),② 等你的 Q1/Q2 回复定性。

  2. Betsy20 commented on Oct 15, 2026

    @Betsy20
    Author

    Q1:重启前完全没有任何 drift —— 缺口是重启引入的

    结论:重启之前一条都没有。

    我把两份日志都完整扫了一遍(不限会话、不限时间):

    文件 行数 时间范围 fold-reconcile/acp-drift 命中
    bili.log.old 48856 2026-10-12T04:21:14 → 2026-10-13T10:45:51 0 条
    bili.log 46408 2026-10-13T10:45:51 → 2026-10-15T12:24 23 条

    bili.log 里那 23 条按类型切开后是:

    2026-10-13T14:22:01.639Z  session-7f6c20a9  sysprompt changed (fold state unaffected)
    2026-10-13T15:34:41.508Z  session-7f6c20a9  sysprompt changed (fold state unaffected)
    2026-10-13T15:48:09.780Z  session-4bdb68ec  sysprompt changed (fold state unaffected)
    2026-10-13T17:31:55.743Z  session-7f6c20a9  sysprompt changed (fold state unaffected)
    2026-10-13T17:34:49.285Z  session-4bdb68ec  sysprompt changed (fold state unaffected)
    ──────────────────────── 以上 5 条全是「fold state unaffected」,与 drift 无关 ────────────────────────
    2026-10-15T03:56:17.255Z  session-4bdb68ec  DRIFTED ← 首次
    2026-10-15T03:56:45.247Z  session-4bdb68ec  DRIFTED
    2026-10-15T03:57:23.958Z  session-4bdb68ec  DESTROYED
    2026-10-15T03:57:24.054Z  session-4bdb68ec  acp-drift
    …(此后 8 小时恒定 80 条)
    2026-10-15T12:04:01.234Z  session-a44cc95c  DRIFTED
    2026-10-15T12:04:44.513Z  session-a44cc95c  DRIFTED
    2026-10-15T12:05:25.992Z  session-a44cc95c  DRIFTED
    2026-10-15T12:06:10.652Z  session-a44cc95c  DESTROYED
    2026-10-15T12:06:42.359Z  session-a44cc95c  sysprompt changed
    

    两次启动:

    2026-10-15T03:53:18.526Z  acp-proxy v0.1.197 (pid 15312, id 01222272)
    2026-10-15T03:55:20.282Z  acp-proxy v0.1.197 (pid 17736, id 96d99f02)
    

    ⇒ 首次 DRIFTED 出现在第二次启动后 57 秒(03:55:20 → 03:56:17)。此前该会话(4bdb68ec)已稳定运行至少 1 天半(10-13T15:48 就有 sysprompt changed,且从未 drift)。

    另外补一条你没问但相关的:7f6c20a9 在整个日志里从未出现 drift,而它同样经历了这两次重启。所以不是「所有会话重启就脱锚」,而是特定会话 + 特定时刻。三个受影响会话的表征差异:

    会话 drift 数 结果
    4bdb68ec 80 存活(43.3 MiB / cache hit 96–100%)
    a44cc95c 328 被打死(69.4 MiB + 400)
    7f6c20a9 0 无异常

    Q2:DSH 重启后既不是恢复也不是重序列化,而是「断档 + 新回合」

    我把 session-a44cc95c 的会话文件解出来了(session.v4.jsonl.zstd,5473 个 zstd 帧,解压后 9210 事件 / 62.02 MB),这是原始落盘记录,不是日志推断。

    证据 1:重启时刻落盘的是两条会话状态事件,接着 6 小时 21 分钟无任何事件

    2026-10-15T03:53:08.559Z  agent/inbox/spliced  {"target":"next-step","start":0,"removedCount":1,"inserted":[],"outcome":"canceled"}
    2026-10-15T03:53:08.602Z  permission/preset     {"preset":"danger-full-access"}
    2026-10-15T03:53:08.602Z  approval/policy       {"policy":"never"}
    ───────────────────────────── 380.9 分钟空档 ─────────────────────────────
    2026-10-15T10:14:04.824Z  session/end-seed      {}
    ───────────────────────────── 109.7 分钟空档 ─────────────────────────────
    2026-10-15T12:03:45.901Z  agent/inbox/spliced  (用户发图)
    2026-10-15T12:03:45.904Z  turn/start           {"turn":13}
    

    注意 03:53:08.602 与 bili 侧 parent-gone 同一秒区间(bili 03:53:18.143 收 parent-gone),而第一条新事件要等到 12:03:45 —— 整整 8 小时 10 分钟后。

    turn 编号也印证是「新回合」而非续接:重启前最后是 turn=12(aborted by user,03:38:29),重启后直接跳到 turn=13。

    证据 2:turn=12 是用户主动中止的,不是崩溃

    2026-10-15T03:36:35.044Z  turn/start  turn=12
    2026-10-15T03:38:29.781Z  turn/end    turn=12  {"kind":"aborted","reason":{"kind":"user"}}
    

    也就是说:用户中止了 turn 12 → 15 分钟后宿主退出重启 → 6 小时后回来发图。重启时那轮没有未落盘的中间结果。

    证据 3:重启后没有 compaction/* 事件,也没走 checkpoint

    全库 compaction 相关事件统计:0 条(这个会话从头到尾)。所以说「宿主原生压缩落地」在本会话的落盘记录里没有任何依据 —— 你之前那条 host-native compaction 猜测在两个会话上都对不上(本机 DSH 侧 compaction-basic.auto 也确实被我显式关掉了)。

    DSH 侧另有旁证:DSH 崩溃日志只有 crash-2026-10-07T*(即 10-07 那两次),10-15 03:53 那次没有 crash 记录 ⇒ 是正常退出/重启流程。

    关于你问的「16 个 order break」

    那 16 条不是重启造成的 stderr,而是 fold-reconcile 的匹配统计:

    resent history drifted: 329 covered id(s) missing — reanchored 1
      (0 positional, 16 order break(s) resynced, 0 by toolCallId, 1 by normalized identity)
    onto churned bytes, 328 unmatched re-enter the wire unfolded (#1921)
    

    但它的确是结构性的——而且我能告诉你它来自哪:11 小时后的那次模型切换。同一会话的 request/header 时间线:

    2026-10-15T03:36:35.581Z  model=deepseek-v4.1-flash  effort=max  tools=296   ← 重启前最后一轮
    2026-10-15T12:03:46.317Z  model=deepseek-v4.1-flash  effort=max  tools=296   ← 重启后第一轮(同一模型,tools 数不变)
    2026-10-15T12:06:27.003Z  model=glm-5.3              effort=max  tools=296   ← 用户切模型
    

    关键:12:03:46 那轮的 model / effort / tools 数与重启前逐字相同(296 个工具定义,工具表字节级一致),但 drift 就在这一轮报出来(12:04:01)。⇒ 这不是「重序列化换了编码」——如果只是编码变化,positional 和 normalized identity 至少能认回一部分,可实际是 positional: 0、normalized: 1、toolCallId: 0,三条通道全废。

    这更像历史被整体替换:329 个 covered id 里只剩 1 个能认回。我倾向怀疑是 DSH 在这 8 小时窗口里对 --D-~684C~9762-SAN14CE-- 工作区的会话存储做了一次重写(该会话文件 mtime 在 12:43,但事件时间戳在 03:53 后直接跳到 10:14)。

    顺带:第二条 drift 会话的 4bdb68ec

    它是同一工作区、同一时段、同一次重启。如果你想核对它是否同样「重启后长时间静默」,我可以一并解压。


    关于 ①②③ 的回应

    ① 接受你的结论(DIGEST DRIFT 与脱锚不同起源)。我把它当关联线索是过度归因了 —— 你的解释(shadow 模式读走 legacy、index.db 纯诊断写入)直接证否了我的怀疑,而且 readsUnified 门控在 src/storage/shadow.ts:115 是可核对的代码事实。

    不过有个观察值得你留意:DIGEST DRIFT 与 hydrated 两次都同秒,且在两次重启上都复现(03:53:21、03:55:25)。如果这是水位线跨进程继承的必然结果,那它的出现频率就等于「每次重启」—— 那么在长会话场景里,用户会经常看到它。你定位的两条根因(水位线无写入者标识、messages 表 INSERT OR IGNORE 不清理孤儿行)我完全接受;修复 PR 出来后我很乐意在本机验证(我可以复现双进程交接)。

    ② 两点确认:

    • substrate appears destroyed 在 80/8500(0.9%)上 latch,同意是检测质量问题而非行为缺陷。我日志里还有一组更强的比例证据:4bdb68ec 的 [acp-drift] 是 8405/8485、8731/8811、9524/9604…分子分母同步增长、差值恒 80,也就是那条 0.9% 的缺口从未扩大。这正好支持你「诚实稳态」的判断,也说明 latch 阈值确实该加比例下限。

    • Q1 已答(见上,重启前 0 条)。Q2 已答(见上,断档 + 新 turn,无 compaction 事件、无 checkpoint)。

    ③ 接受,我的建议 (3) 撤回。 你说得对——「网关配额小于模型标称窗口」是合法场景,我那条建议会误伤。我原本的困惑只是「同一时刻 nudge idle 分母 872000、preflight 分母 100000」读起来打架,既然双分母是 #987 的有意设计,那就只是可读性问题,不是缺陷。fail-fast 502 我也确认是正确行为(最多省 35K、缺 640K)。

    ④ 接受。特别认同「fold 锚点只存在于各进程从 legacy 文件加载的状态里,不跨进程继承」—— 这与我在 Q2 里看到的落盘证据一致(重启后无 compaction 事件、无锚点重建记录)。①修好后不再有跨进程脏数据,那 (2) 确实不需要。


    我可以继续提供的

    1. 解压 4bdb68ec 做同样分析(同工作区、同一次重启),对比两者为何 80 vs 328。
    2. 等 ① 的 PR 落地后在本机复现双进程交接(我这边有稳定的复现条件:三次重启间隔都很短,port 18788 held by a same-lane predecessor 每次都有)。
    3. 如果需要,把 10-15 03:53 前后 bili 侧逐行日志(含所有 conn 事件、启动序列)整理给你。
  3. ranxianglei commented on Oct 15, 2026

    @ranxianglei
    Owner

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    两份证据都收到了,是决定性的。jsonl 时间线(turn=12 用户中断于 03:38:29 → 末事件 03:53:08 → end-seed 10:14:04 → image turn=13 12:03:45;全程零 compaction 事件;重启后首个请求 model/effort/tools 逐字节相同)把脱锚归因钉死了:DSH Desktop 更新 + 重启重建并重新发送了历史——bili 收到的是与之前结构不同的历史,各对账通道做了全部能做的(order bracket 救回 1 条),其余 328 条诚实展开、preflight fail-fast 502 停会话。这是 #3013/#2438 的同症状家族(宿主中途改变了重发内容),新触发路径。「重启前零 drift」则确认 DIGEST DRIFT 由重启交接引入。四个面现在都有了结论,修复已提 PR:#3288

    八问

    1. 是什么问题:宿主重启后同时出现两个异常——unified 存储 DIGEST DRIFT 固化不自愈、fold 锚点脱锚(80/329 ids missing);issue 标题假设二者同源。
    2. 什么原因导致的:不同源,两个机制。① DIGEST DRIFT:parent-gone 交接期新旧进程共享 state dir,新进程继承上一任 writer 的水位(last_ingested_seq 无 writer 身份,直接信任走 delta)+ index.db 残留行(full ingest 只 INSERT OR IGNORE 增、从不删)→ 每次抽样 digest 校验永久失败;master 上 b9e82f6 的 heal(drift 时清水位)治不了——清完水位后的 full re-ingest 仍保留残留行。② 脱锚:宿主更新+重启重建了会话历史并重新发送(你的 jsonl 证明无 compaction、无崩溃、请求参数逐字节相同)——宿主侧行为,bili 的检测→全通道对账→升级→诚实展开均按设计工作。shadow 模式读取走 legacy 文件(readsUnified gate),DIGEST DRIFT 不影响 fold 锚点加载——你的建议 4 的答案:不同源。
    3. 影响范围与严重程度:① 启用 BILI_STORAGE_UNIFIED=shadow/full 且发生多进程交接(旧实例未完全退出即重启)的用户:shadow 下诊断信号永久假阳性(ERROR 日志固化);full 下至首次 save 收敛前读取被污染。当前为 opt-in,影响面=开了该 flag 的用户。② 脱锚面:宿主侧重建导致大面积展开→preflight 502 停会话(a44cc95c 实例);bili 侧无缺陷,但「mass missing → substrate destroyed」缺比例门槛(见下)。
    4. 怎么修复的:PR fix: 重启交接后 unified 存储跨进程污染固化(DIGEST DRIFT 永不愈合)— #3285 #3288——writer 启动时清空全部水位一次(信任不跨进程边界,对齐 Storage layer: four concrete defects (filename coupling, multi-writer heuristic, non-atomic content-store write, immortal compressed sessions) #2671 共享目录契约);plan 来自完整 raw-tail log 时 full 路径清扫 plan 中不存在的 message 行。带 completeLog gate:folded render view(envelope-only,有界窗口)绝不触发清扫——否则会把 render 窗口外已 intern 的 raw 行删掉(我首版无 gate 实现正是因此打破 sliding folded tail 测试,gate 是承重的)。回归测试已验证:去掉修复红、加上绿。
    5. 是否有回归问题:审过的既有行为——稳态 delta 路径不变(水位仅 boot 清一次);envelope-only ingest 不清扫(folded render 有界窗口语义保持);只读打开方(export JSONL 导出)不触碰 reset;干净会话行集零变化。披露的行为变更:每 boot 每个已存会话多一次 full re-ingest(毫秒级本地开销);被污染会话交接后持久化行集变化。wire 格式/配置面/kernel/版本号均未动。
    6. 是否破坏缓存:不涉及。改动仅 index.db 内部行集(unified 存储),wire 字节不动,前缀缓存/重试/去重键不受影响。
    7. 是否改了设计方向:不涉及,向既有契约收敛(共享目录⇒不继承跨进程信任)。
    8. 是否引入了新的配置:无。

    剩余边界(PR 里已记录在案):tail 为 folded-resident 的会话(live save 无 rawTail)无法清扫,其中的外来残留保留(严格优于现状——现状任何类别都不愈合);full 模式 boot 到首次 save 之间的读取可能看到外来字节。

    其余判定:

    你的 offer:要 4bdb68ec 的解压视图(我想对比它的 80 条与 a44cc95c 的 328 条形状是否都是结构性替换——若是,确认 DSH 两个会话都被重建);本地双进程复现建议等修复发布后做(本 PR 进下一版,你的 v0.1.197 升级前看不到;想提前验证可装下一版全局包)。

    结论:DIGEST DRIFT 机制面已修(等 CI + 人工合并);脱锚面归因宿主侧、bili 侧行为符合设计、无需代码改动;#987 面非缺陷。issue 是否关闭由你定夺——三个面的归因都已闭环,可以关;若想等升级后验证双进程复现再关,也合理。

  4. ranxianglei commented on Oct 15, 2026

    @ranxianglei
    Owner

    🤖 Powered by ework · qwen3.8-27b

    [bot] 🏷 (ai: vllm-qwen/qwen3.8-27b)

    进度更新 — PR #3288 已过一轮 CI,发现并修掉了一个真实回归,现已重推(head 0f11198fd),等新一轮 CI 收尾。

    首轮 CI 结果(12 个 test shard):

    1. shard 3 红 = 我的修复引入的回归,已修。 tests/incremental-lane.test.ts「divergent resync survives a cold restart without a 409 loop」失败。机制已查清:增量 lane(Delta lane: native-mode clients send only deltas, server maintains full state + one-time fold, upstream receives snapsho | 增量车道:native 模式客户端只发增量,服务端全量维护+一次折叠,上游只收快照(#2926 的泛化) #3248)按位置消费 unified messages 表——resync 时把当时的行数记为 baseSeq 纪元,被拒绝分支的旧行必须留在表里当审计底,服务历史从纪元处切片。我的「全量 ingest 清扫非本计划行」会把旧分支行删掉 → 纪元索引错位 → 冷重启重建出空 canonical → 409 循环。修法:lane 拥有的会话(session_ext 里有任何 inc:* 键)豁免清扫——它们保留 fix: per-session ingest watermark — storage saves cost O(new messages), not O(full log) (#3133) #3166 类孤儿(有界:启动时的 watermark 重置仍保护其 delta 信任)。本地验证:incremental-lane 29/29、storage 全家桶 90/90、typecheck 干净。

    2. shard 1 红 = master 本来就红(与我的改动无关),顺手修了。 tests/issue3148-upstream-circuit.test.ts 的精确 clamp 事件断言(cap=1360)写于 [bug] 0.1.195 输出预算三路饿死仍复现:无 output 上限模型 restore 无下限(1→252、fork 原样转发 1)、#2490 planning floor 钳到 1479–2623 → 3 会话 9 次 finish=length 空轮不重试(#546/#1665/#1840/#2904/#2756 残留) #3071 的 4096 能力地板合入之前;两条分支并行开发互不知情,合并后互相打架,master 全平台确定性红(已对照 base commit 自己的 CI 确认)。4096 地板是有意的 fail-closed 行为(恒 ≤ window−input,另有专属钉死测试)。修法:更新两处过期常量 + 注释说明(纯测试改动,不动源码;测试真正的不变量——记录值==线上值——保持成立)。查重:无既有 issue/PR 处理此红。这是与 [bug] Fold anchor detaches after host restart (parent-gone): hydrated and unified-shadow DIGEST DRIFT within the same second, gap solidifies without self-healing (0.1.197, complementary to #3013 restart path) | [bug] 宿主重启(parent-gone)后 fold 锚点脱锚:hydrated 与 unified-shadow DIGEST DRIFT 同秒,缺口固化不自愈(0.1.197,与 #3013 重启路径互补) #3285 无关的独立小修,单独标注 commit,如不认可可摘除,不影响主修复。

    PR 描述已同步这两点(含行为变更披露与残留项)。等新一轮 CI 全绿后我给最终收口回复。

  5. ranxianglei commented on Oct 15, 2026

    @ranxianglei
    Owner

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    补充:又一个持续 DIGEST DRIFT 现场实例 —— #3297(v0.1.197,Windows + DSH NEXT,默认 shadow 模式,配置里没有任何 storage 段)。报告者观察到同一会话 [storage] unified shadow DIGEST DRIFT 在崩溃前同一天连续出现 19+ 次(首次 12:12Z、末次 13:14Z),随后 13:14Z 打出 unified shadow mode ENABLED 启动行——即该时段内进程重启过。时间背景:报告者刚做完一次损坏 session store 的手动恢复(隔离损坏文件 → 重启 → 恢复备份 → 再重启),短时间内 bili 多次重启——若旧实例未完全退出新实例即起,正好落在本 issue 定位的跨进程交接窗口。

    本案尚无证据区分与你的机制(水位跨进程继承 + messages 表孤儿行)同源还是另有 drift 源,先记为现场实例。PR #3288 的修复发布后其升级可作一次验证:若 drift 停止则同源坐实;若仍复现则存在另一漂移源,需另查。

    相关一点:我已在 #3297 建议该报告者在 drift 反复出现期间不要切 storage.unified=full——shadow 模式下 legacy JSON 仍是权威读路径,活数据不受影响;full 模式会把 unified 视图提为主读路径,未收敛时切过去会读到不一致视图。

  6. ranxianglei commented on Oct 15, 2026

    @ranxianglei
    Owner

    🤖 Powered by ework · qwen3.8-27b

    [bot] 🏷 (ai: vllm-qwen/qwen3.8-27b)

    收口 — CI 全绿,PR #3288 可合并(等人工合并)。

    head 0f11198fd:39/39 check 通过,12/12 test shard 全绿(含上一轮红的 shard 1「#3148 过期断言」与 shard 3「lane baseSeq 回归」)。

    最终交付状态:

    PR #3288:#3288 — 合并由人工执行。issue 保持 open 直到你确认新版本(≥下一发布)上重启后不再出现 DIGEST DRIFT;届时如 4bdb68ec 类会话仍残留脱锚,再按你的提议做 80 vs 328 对照取证。

  7. changed the title [-][bug] 宿主重启(parent-gone)后 fold 锚点脱锚:hydrated 与 unified-shadow DIGEST DRIFT 同秒,缺口固化不自愈(0.1.197,与 #3013 重启路径互补)[/-] [+][bug] Fold anchor detaches after host restart (parent-gone): hydrated and unified-shadow DIGEST DRIFT within the same second, gap solidifies without self-healing (0.1.197, complementary to #3013 restart path) | [bug] 宿主重启(parent-gone)后 fold 锚点脱锚:hydrated 与 unified-shadow DIGEST DRIFT 同秒,缺口固化不自愈(0.1.197,与 #3013 重启路径互补)[/+] on Oct 16, 2026
  8. ranxianglei commented on Oct 17, 2026

    @ranxianglei
    Owner

    (ai: zhipuai-lb/glm-5.3)

    收口:本单描述的「重启交接后折叠锚脱开 → DIGEST DRIFT 永不愈合」已由 PR #3288 修复(merged 2026-10-16 04:27 UTC,标题即引用本单),随 v0.1.198 发布。#3511 审查已核对该修复(watermark 不跨进程信任、全量路径清扫外来消息、lane-owned sweep)。

    注意:审查同时发现一个不同根因的残留缺陷——full 模式下 blockContents 先于 state.blocks 行被清导致影子态 digest 漂移无法收敛——该残留已在 #3559(A 组)单独立项跟踪,与本单的跨进程交接问题无关。

  9. added 2 commits that reference this issue on Nov 20, 2026
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions