Skip to content

[OPS-PTC P7] 区分恢复后的重复教学与压缩后的漏教 #998

Closed

Description

@Thatgfsj

P7 · 区分恢复后的重复教学与压缩后的漏教

总计划 #978,所属工作流 #978。

问题:教学写入会话历史,内存 taught 标志却属于 agent。恢复和压缩对两者的影响不同,日志里曾出现过教学不等于它现在仍可见。

前置条件:可先写隔离复现;与 P1/P2 协调 revision。

从哪里读

  • src/publication/ptc.ts
  • src/prompt-injection/index.ts
  • test/prompt-injection.test.mjs

认领前记录当前 main SHA。以上为优先检查的范围,需要扩大写域时先说明文件与原因。

按顺序执行

  1. 从空隔离会话记录一次教学的来源、revision、消息 id。对工具续步和同请求 retry 计数,区分旧消息重放与新增消息。
  2. 从已包含该消息的历史恢复,送入下一条用户请求。再造一例压缩已覆盖教学的当前 surface,检查下一次确实需要引导时能否得到短提示。
  3. 检查进入历史前被取消的批次不会消耗教学机会。若宿主缺少可靠的 surface 证据,提交最小复现和候选扩展点再决定实现。

验收清单

  • 恢复后同版本教学仍可见时新增0条;压缩移除后如需补教只发适用短提示;工具续步不重复追加全文。
  • 真实用户回合数与工具调用次数分别记录,不能把所有 user 角色消息计作人类输入。

范围边界与停手条件:不读历史真实用户会话,不把无限循环的成因归结为本钩子。

验证与交付

先运行 npm run build;依赖 native worker 的测试先运行 npm run build:ptc。定向入口:node test/run.mjs prompt-injection。确认过滤器命中目标套件,记录实际 pass / skip / fail。

认领模板:编号 / 当前 SHA / 目标文件 / 第一个失败样例。提交时贴修改前与修改后结果,以及撤掉改动后会失败的断言。已有 PR 请先在原讨论协作。行为及中英文文档同 PR。


原问题讨论:#929。本单与其指向同一交付,评论处保留原始复现记录。

Activity

  1. Thatgfsj commented on Nov 19, 2026

    @Thatgfsj
    CollaboratorAuthor

    认领:998 / 审计基准 main@58f6e281;工作基线 origin/card/d3-full-publication@d0fcd6f(分支 card/p7-teaching-dedupe)。\n\n目标文件:src/publication/ptc.ts、src/prompt-injection/index.ts、test/prompt-injection.test.mjs(如需扩大写域,先在此说明)。\n\n第一个失败样例:教学经 step-tail 进入 logged history 后,按 seed 恢复会话——新 Agent 的内存 taught=false,且宿主对 seed 事件不重发 session/event(dsh-session 的 firstLiveSeq 契约)——第一个被接受批次仍追加整课全文,即重复教学。反向样例:压缩 replace 遮蔽教学的 surface 节点后内存 taught 仍为 true,provide 永远返回 undefined,即漏教。计划以 session.deriveMessages()(模型实际可见历史)为准做区分,复现先红后实现。

  2. Thatgfsj commented on Nov 19, 2026

    @Thatgfsj
    CollaboratorAuthor

    写域说明(认领评论所述"如需扩大写域,先在此说明"):除已声明的三个文件外,需要补一个最小写域扩展——test/resident-switch.test.mjs。原因:该套件用假 agent(session 只有 id/header/append/read)驱动真实教学的 pre-step;本单把"已提交教学不再重复"的判据从内存 taught 标志改为 session.deriveMessages() 可见性后,该假 session 必须提供 deriveMessages(由测试内 committed 列表支撑),其 committed-lesson 断言才能走真实证据而非降级路径。改动只加假 session 的一个方法与 batching-teach 用例的提交记录,不触碰该文件其它用例。

  3. qikairo7 commented on Nov 19, 2026

    @qikairo7

    补一份 0.5.5 的注入量基线,可作为 P7 验收数据。

    我统计了本机 2026-11-17~11-19 的 695 个会话日志,清洗后 78 个日常根会话(standard 52、ops-ptc 22)。22 个 ops-ptc 会话中,19 个触发 batchingGuidance(86%),共 349 条;均值 15.9 条/会话,单会话最高 80 条。分布:3 个会话 0 条、2 条×2、3 条×3、5 条×2、6 条×2、8 条×1、17 条×2、19/20/31/32/42/48/80 各 1 个。

    建议验收时同时记录「真实用户回合数」和「注入条数」,并要求设置每会话上限;当前实现没有上限,长会话会持续累积。

  4. Thatgfsj commented on Nov 20, 2026

    @Thatgfsj
    CollaboratorAuthor

    已由 #1033 合入 main 交付(18 张卡并集,见 PR 描述与 docs/CHANGELOG.md 的 Unreleased 条目)。

    教学通道按 #929 改为工具结果的 ephemeral additionalContexts,恢复/压缩去重随通道改由「每 agent 只教一次」保证,step-tail provider 与压缩短提醒未保留。

  5. Thatgfsj commented on Nov 20, 2026

    @Thatgfsj
    CollaboratorAuthor

    P7 的交付方式随统一合并调整:#1033 已合入 main(c70633da)。按 #929 的结论,一次性教学改走首个被接受根 run_code 结果的 additionalContexts(同一步 ephemeral、绝不进入历史),并且每 agent 条目只教一次:

    契约与断言:test/prompt-ephemeral-teaching.test.mjs、test/resident-switch.test.mjs、docs/CHANGELOG.md 的 #929 条目。若仍需要「压缩后短提醒」这一具体行为,请按 ephemeral 通道另开新单。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions