Skip to content

Stuck while folding | 折叠卡住 #5746

Open

Description

@ranxianglei

原因不是大小,是折叠工具卡住了:这些压缩块和工具调用的边界绑在一起,一合并就要拆开正在用的调用,所以它一律拒绝——我换了几种切法都被挡回来。它本身没坏,坏的是它那道「折叠边界」的检查。
billion-context-full-log (6).txt


Mirrored from ework issue #5747

Activity

  1. ranxianglei commented on Nov 5, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    查重:重复 #5283(GitHub「T2 distillation repeatedly fails turn integrity, including singleton blocks」,2026-10-31,p1,open)——同症状:T2 蒸馏(合并已有压缩块)被回合完整性门禁一律拒绝、怎么切都切不动、上下文只增不减;同错误签名:cannot satisfy turn integrity without unfolding already-folded message(s)。本单后到(11-05 vs 10-31),按先来后到并入 #5283 一起处理,已打 duplicate 标签;关不关由你定。

    标签: bug / dsh / scope/kernel / p1 / duplicate / needs-decision —— 分层蒸馏整体停摆、块摘要只增不减(p1②失控增长类);本实例在 dsh 车道(#5283 是 pi,机制与车道无关);修复等你拍板。

    已验证(版本钉死:0.1.212,日志尾部)

    你的判断成立——坏的确实是合并门禁那道「折叠边界」检查。日志里会话 e2211607…:

    • 38 次块范围合并全部被拒,试了 16 种切法,最小到 2 块(b116–b117、b136–b137)、3 块(b122–b124、b109–b111)也全被拒;断路器当天 arm 了 10 次(arm→10 分钟静默解除→nudge 再要求→再失败);
    • 原始消息折叠(T1)正常,只有块合并(T2)死;
    • 关键对照:11-02 同一会话 b1–b102 一次合并 102 个块成功过(省 ~255K tokens)——门禁当时是过得去的;之后新产生的 T1 块带进了「陈旧分裂」(工具调用在结果上链前就被折进块),11-05 起所有合并必死。

    机制判断(三层叠加,已对当前 master 代码复核)

    1. 陈旧块 × 全局扫描耦合:合并门禁对「合并后的全量覆盖」做回合完整性扫描(kernel/src/unit-projection.ts merge 分支);只要任一活跃块带陈旧分裂(调用已折、结果仍可见),消费/扫到它的合并就确定性致命——一个坏块毒化所有合并;
    2. 块号是创建序不是时间序:bX–b141 这类切片展开后的实际消费集取决于块的源位置分布(本单请求 b139–b141 实际展开成 b117–b141+b158),切法基本靠猜——这就是你换几种切法都被挡回来的直接原因;
    3. 报错点名错 ref + nudge 无可行性筛查:错误里的样例列的是被合并块自己的覆盖前 5 条,不是真正违约的 ref;「align to whole turns」的建议在此场景不可执行;nudge 的 pendingByTier 对全部 T1 块求和、不做可行性筛查,紧急需求永不消失 → 重试循环。

    状态与下一步

    修复属 kernel 变更(合并门禁 + 建议层 + 诊断层),#5283 线程里已给出选项 A/B/C/D(D = 建议层修正 + 门禁对存量违约豁免 + 报错点名真正违约 ref + acp_status 暴露块源位置),等你拍板。本单不开并行修复 PR;我已把新证据补到 #5283(dsh 车道实例、v0.1.212、38 拒/10 次断路器、「先成功后卡」对照、2 块最小切片失败、批量里 4/5 通过说明毒块局部化)。另提醒:在途 kernel PR #5700(T1 harvest stall escalation)与 #5668(nested compression state integrity)分别压着 kernel/src/compress.ts 和 projection 面,将来修这个要防热文件冲突。

  2. ranxianglei commented on Nov 5, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    收工汇报(结构化八问):

    1. 是什么问题:T2 蒸馏(把已有压缩块再合并)被回合完整性门禁一律拒绝——怎么切都切不动,块摘要只增不减,上下文单调上涨。
    2. 什么原因导致的:三层叠加——①陈旧块(工具调用在结果上链前就被折进块)× 合并门禁对「合并后全量覆盖」做回合完整性扫描,一个带陈旧分裂的活跃块毒化所有合并(kernel/src/unit-projection.ts merge 分支);②块号是创建序不是时间序,切片展开后的实际消费集客户端不可预测(你换切法全被挡的直接原因);③报错点名错 ref + nudge 无可行性筛查 → 断路器反复 arm 的重试循环。
    3. 影响范围与严重程度:任何存在活跃陈旧分裂块的绑定会话,分层蒸馏能力整体停摆,直到窗口顶死会话(p1②失控增长类)。dsh(本单,v0.1.212)与 pi(T2 distillation repeatedly fails turn integrity, including singleton blocks #5283)两车道均已确认。
    4. 怎么修复的:修复属 kernel 变更,选项 A/B/C/D 已挂在 T2 distillation repeatedly fails turn integrity, including singleton blocks #5283 线程等你拍板(D = 建议层修正 + 门禁对存量违约豁免 + 报错点名真正违约 ref + acp_status 暴露块源位置)。本单未动代码,只做 triage/并入 + 证据补充。
    5. 是否有回归问题:不涉及(无代码改动)。
    6. 是否破坏缓存:不涉及(无代码改动);注意该缺陷本身的表现就是上下文/存储只增不减。
    7. 是否改了设计方向:不涉及(待拍板;D 不转向,只修门禁存量违约处理与诊断)。
    8. 是否引入了新的配置:不涉及。

    判定:本单 = #5283 的后到实例,已打 duplicate 标签并入处理(关闭权限在你,我未关)。新证据已补到 #5283 (comment) 。等你在 A/B/C/D 拍板后按 Kernel Boundary 走实现;本单不再另开 issue/PR。

  3. changed the title [-]折叠卡住[/-] [+]Stuck while folding | 折叠卡住[/+] on Nov 5, 2026
  4. ranxianglei commented on Nov 5, 2026

    @ranxianglei
    OwnerAuthor

    看master是不是修复了

  5. ranxianglei commented on Nov 5, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    没修。 刚拉到最新 master(9a2d51d65,比本单分析时新 32 个提交)逐项核过:

    结论:升级解决不了这个卡住(你的日志已是 0.1.212,master 更新后机制未变)。要动的话等你在 #5283 上定个方向(我的推荐仍是 D:门禁对存量违约豁免 + 报错点名真正违约 ref + 建议层加可行性筛查),拍板后按 Kernel Boundary 走实现。

  6. ranxianglei commented on Nov 5, 2026

    @ranxianglei
    OwnerAuthor

    怎么修复 我看还要拍板 怎么拍

  7. ranxianglei commented on Nov 5, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    🔶 需要决策 (ai: vllm-qwen/qwen3.8-27b)

    背景一句话:分层蒸馏(合并已有压缩块)被回合完整性门禁一律拒绝——元凶是「陈旧分裂」块(工具调用在结果上链前就被折进块)——怎么切都压不动,块摘要只增不减直到窗口顶死会话。待决问题:合并门禁 + 诊断层的修法方向四选一(选项已在 #5283 线程给出,下面重述,可直接在此拍)。

    过程说明:本会话中途因环境卡滞被平台强制重启过一次,结论不受影响,证据均已落在两个线程的评论里。

    结构化八问

    1. 是什么问题:含「陈旧分裂」块的会话,T2/T3 蒸馏能力整体停摆——任何块合并(最小到 2 块切片)确定性致命失败,上下文单调上涨顶死会话。
    2. 什么原因导致的:三层机制链(最小复现已验证,仅用内核公开 API)——①数据侧:异步/subagent 工具结果迟到,调用先被折进块、结果后到,pair 永久分裂(正常 churn,产生陈旧块);②门禁侧(缺陷本体):合并分支对「合并后的全局覆盖」做回合完整性校验(kernel/src/unit-projection.ts),任一活跃块带存量分裂就让所有触及它的合并必死——该校验的只是本次合并新引入的增量,实际校验的是存量;最小复现证明全局耦合:只覆盖两条纯文本消息(全程无工具/无推理)的无辜块,单块合并也报同样错误且点名它自己;③表现侧:报错点名错 ref(列被合并块的覆盖而非真正违约 pair)、acp_status 不暴露块源位置(绕行不可发现)、nudge 无可行性筛查求和 → 重试循环 + 断路器反复 arm/解除。
    3. 影响范围与严重程度(按选项):
      • 现状(不决定):任何产生过陈旧分裂块的绑定会话停摆,p1②失控增长类;dsh(本单,v0.1.212)与 pi(T2 distillation repeatedly fails turn integrity, including singleton blocks #5283)两车道已确认。
      • A/B/C(仅修建议层、严格门禁保留):受影响会话仍自动卡死,只能手动自救(定位毒块→decompress→pair 回链即愈);p1 降为「可用但需绕行」。
      • D(推荐,A+门禁豁免存量违约):全面解冻——今天硬失败的合并将成功且逐字保持既有分裂状态(线上字节级不变,可证:carve 只触碰直接 id、消费覆盖原样透传、折叠集成员不变);新老会话都恢复,p1 解除。
    4. 怎么修复的(推荐 D 的修法思路):门禁从「校验存量」改为「校验增量」——先用合并前状态算出存量违约集,只有本次合并新引入的违约才致命(保留 [Bug] Merging stale compressed blocks retracts existing coverage, causing repeated coverage-regression rejections | [Bug] 合并旧压缩块时撤回既有覆盖,导致 coverage-regression 反复拒绝 #4484 核心承诺:永不展开消费块拥有的 id);存量分裂降级为警告+诊断。同批落地建议层修正:报错点名真正违约 ref(改动几行);acp_status 暴露每块源位置+陈旧标记(加性字段);pendingByTier 改可行性预筛(建议前 dry-run 与 apply 同一套 projectUnit,沿用 [Bug] recommend/apply 对同一区间的 turn-integrity 判定永久不一致:acp_status 反复推荐的区间被 apply 侧整段拒绝(0.1.196,Range would split N turn(s) at the protected-zone boundary) #3236 单一投影纪律)。行为变更披露:kernel 测试 issue4484 用例 3 从「必须失败」翻转为「成功且保持既有分裂」。数据侧根治(折叠时保证调用/结果同进同出,防新陈旧块产生)属另一机制(生成路径 vs 合并路径),另立 follow-up,不并入本 PR。
    5. 是否有回归风险(按选项):
    6. 是否破坏缓存:各选项都不动前缀缓存契约——D 出站字节级中性(分裂 pair 今天就在线上、流量已证明可容忍);A/B/C 纯诊断/建议层。
    7. 是否改了设计方向:不转向。D 是把合并门禁对齐到 fresh-fold 路径的既有哲学(只对本次操作引入的增量负责、存量原样保留)——收敛而非转向。
    8. 是否引入了新的配置:无。若你要 kill switch 可挂 rollout.features 三态开关(默认关=旧行为),非必需。

    选项对比

    选项 内容 解开存量停摆 防新陈旧块 风险 工作量
    A/B/C 仅建议层(创建序 vs 源序跨度分叉修正、建议前预筛、acp_status 暴露源位置),严格门禁保留 ✗(仅手动自救) ✗ 近零 小
    D(推荐) A + 合并门禁对存量违约豁免(增量执法)+ 报错点名真正违约 ref ✓ 自动 ✗(但新发生不再致命→另立 follow-up) 中(受限) 中

    推荐:D。 不决定的默认行为:不动(kernel 变更本就需你批准),受影响会话保持冻结,当前唯一绕行是手动 decompress 疑似毒块(未上 A 之前定位靠猜)。

    回复一个字母即可拍板;拍板后我按 Kernel Boundary 实现(PR 声明 + 版本 bump + 双层测试 + 人工评审),归并 #5283 处理,本单不开并行 PR。

  8. ranxianglei commented on Nov 6, 2026

    @ranxianglei
    OwnerAuthor

    d

  9. ranxianglei commented on Nov 6, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    收到,D 已拍板并记录:合并门禁对存量违约豁免(增量执法)+ 报错点名真正违约 ref + acp_status 暴露块源位置。按 Kernel Boundary 开工(PR 声明 kernel-change + 引用本线程批准 + kernel 版本 bump + 双层测试),归并 #5283 处理。完成后在此回 PR 链接与行为变更披露。

  10. ranxianglei commented on Nov 6, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    收到(与上一条相同,按同一决策处理)。D 方案已记录,进展同步:

    拍板后我先查了在途 PR,发现这个方向今天已经有人开好了两个互补的 PR(在我确认之前提交):

    1. [PR] fix(kernel): recover tier-distillation merges around historical mid-turn blocks (#5789) #5791(fixes Reaching out to the author — a plugin bug is throwing errors and causing the context to balloon rapidly. | 求助作者,插件bug报错导致上下文急速增加 #5789)— apply 侧门禁豁免:合并时若完整性冲突的 unresolved id 全部不属于本次新折/重新认领的内容(即存量违约),不再 fatal,继承冲突 + 诚实警告放行;真正的新违约仍拒绝。额外带了一个恢复阶梯:能绕开的坏块从消耗集里摘除(保持 active、覆盖不丢),合并绕着它继续;全部被摘除时硬报错而不是静默 no-op。错误信息改成点名实际冲突 ref + 归属块 + 下一步动作。
    2. [PR] fix: screen tier merge nudges against compression eligibility #5777(fixes T2 nudge repeatedly recommends block merges rejected by turn-integrity gate #5776)— advisory 侧预筛:nudge 广告 T2/T3 目标前用真实 apply view 过一遍 projectUnit,整段不合格就降级到单块(上限 8 次投影),都不行就不广告——断掉「广告→必拒→熔断器反复武装」的死循环。

    两者核心文件零重叠(unit-projection.ts vs compress.ts),合起来正好是 D 的两条主线。按一个线程一个修复 PR 的规则,我不开第三个 PR,改为对这两个做独立审核(对照你批准的 D 语义逐条核:豁免条件是否精确、#4484「永不展开已耗块 id」保证是否完好、双向门禁测试是否齐全、行为变更披露是否完整),有缺口直接补进现有分支。

    审核结论稍后单独回复。

  11. ranxianglei commented on Nov 6, 2026

    @ranxianglei
    OwnerAuthor

    🤖 Powered by ework · qwen3.8-27b

    (ai: vllm-qwen/qwen3.8-27b)

    D 方案审核完成。 两个在途 PR(#5791 + #5777)我逐 diff 独立核过,结论如下(结构化八问):

    1. 是什么问题:长会话里存在「历史块边界切在回合中间」的块(call 折进了块、result 还可见)。T2/T3 合并时的 turn-integrity 检查是全局扫描——只要存在一个这样的存量违约,任何沾到相关覆盖的合并都被一律拒绝;nudge 又反复广告同一个必死区间 → 熔断器反复武装,上下文只增不减。
    2. 什么原因导致的:三层。(a) 数据面:折块时 call/result 没原子对齐,留下 stale split;(b) 判定面:合并门禁把「任何 unresolved 冲突」当 fatal,不区分存量 vs 本次新引入——一个毒块毒死所有合并(unit-projection.ts merge 分支,survivingCoverage 是全局的);(c) 诊断面:advisory 不预筛可行性、错误信息点名的是 consumedCoverage 采样而不是真正冲突的 ref,用户无解。
    3. 影响范围与严重程度:所有带历史 mid-turn 块的长会话插件车道(dsh/pi/opencode 全量重发类)。p1:T2/T3 永久停摆 → 摘要块无限累积 → 窗口溢出。三个实例报告(T2 distillation repeatedly fails turn integrity, including singleton blocks #5283 pi / Stuck while folding | 折叠卡住 #5746 dsh 本单 / Reaching out to the author — a plugin bug is throwing errors and causing the context to balloon rapidly. | 求助作者,插件bug报错导致上下文急速增加 #5789 dsh),本单日志 38 次拒绝 + 10 次熔断武装。
    4. 怎么修复的:[PR] fix(kernel): recover tier-distillation merges around historical mid-turn blocks (#5789) #5791(apply 侧,kernel/src/unit-projection.ts +152/-18):冲突的 unresolved id 若全部不属于本次新折/重新认领的内容(=存量),继承冲突 + 诚实警告放行;涉及新违约时先走恢复阶梯——把肇事块从消耗集摘除(保持 active、覆盖不丢)、合并绕着它继续;只有真正无解的 span 才拒绝,且拒绝信息点名实际冲突 ref + 归属块 + 下一步动作(保留 "cannot satisfy turn integrity" 关键短语,宿主与既有套件靠它匹配)。[PR] fix: screen tier merge nudges against compression eligibility #5777(advisory 侧,kernel/src/compress.ts +40/-3):nudge 广告 tier 目标前用真实 apply view 过一遍 projectUnit(KDD#12 单一投影纪律),整段不合格降级到单块(上限 8 次投影),仍不行就不广告——断掉死循环。
    5. 是否有回归问题:逐项审过——[Bug] Merging stale compressed blocks retracts existing coverage, causing repeated coverage-regression rejections | [Bug] 合并旧压缩块时撤回既有覆盖,导致 coverage-regression 反复拒绝 #4484 不变量(合并永不丢既有覆盖)不变且重新钉住(coveredMessageIds 前后差集断言 + 新增「post-state withdrawn ⊆ pre-state withdrawn」断言);双向门禁测试齐全(该放行的放行:b1..b4 绕 b4 成功、surviving 毒块下干净块照常蒸馏;该拒绝的仍拒:b2..b2 自区间仍 fatal);KDD#12 recommend/apply 一致性保持(recommend 侧复用同一 projectUnit 自动继承豁免);行为变更披露与批准范围一致(issue4484 case 3 must-fail→success 翻转、poison 自区间 b4..b4 hard-fail→幂等 no-op、拒绝文案更换但关键短语保留);缓存/重试/去重策略未动;配置面零变更。残留风险两条(非代码缺陷):两分支均落后 master 5 个提交(master 的 3a0c47e 恰好动了同一文件 unit-projection.ts 的性能重构),合并前需以最新 master 验证一遍绿;两 PR kernel 版本号撞在 0.0.183,后合者需机械 rebump 0.0.184 + lockfile regen(流程已写在 [PR] fix(kernel): recover tier-distillation merges around historical mid-turn blocks (#5789) #5791 body)。
    6. 是否破坏缓存:否。继承冲突不改 wire 字节(carve 只作用于 direct ids,consumed/surviving 覆盖原样通过),前缀缓存稳定性不受影响。
    7. 是否改了设计方向:没有方向性变化——就是批准过的 D(存量违约豁免 + 真实违约点名 + advisory 预筛)。恢复阶梯是 D 在 apply 侧语义内的增量强化(摘除肇事块而非整段拒绝),与「永不展开已耗块 id」的方向一致。一点显式报告:原决策范围里的「acp_status 暴露每块源位置 + staleness 标记」两个 PR 都没做——D 落地后拒绝基本消失、事件时警告已点名 ref+块,该项从「解锁必需」降级为「面板便利」,我先按可选打磨处理,你如仍要再做。
    8. 是否引入了新的配置:无。无新 env/config/默认值。

    我执行的动作(均已验证):

    判定:#5791 可合(等 de99667 的 CI 转绿即可,建议先合——它是解锁卡死折叠的核心);#5777 卡在作者的 lockfile push 上(机械修复已备好,随时可落)。数据面根治(折块时 call/result 原子对齐)按批准范围留作后续独立工作,不在这两个 PR 内。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions