来源: [#2190](https://github.com/ranxianglei/billion-context/issues/2190) / [PR #2211](https://github.com/ranxianglei/billion-context/pull/2211) 分析 标签泄漏 时发现 ## 现象 模型模仿的 render tag 出现在用户可见输出,且 bili.log **全程零 `[tag-echo]` 日志** —— 即字节从未进入 tag-echo 状态机。最新生产样本(#2190 评论区截图,2026-10-06,dsh host):助手正文内、工具调用之前,两个**完整合法**的 acplike 对(其一带模型自创属性 `text-coercion="ignore"`),后接中文正文。四个特征:真泄漏 / 真在正文 / 工具调用前 / 过滤器零日志。 ## 机制(已在代码逐项验证;master @ 5e43209 与 PR #2211 分支行为一致) `processOpenai`(src/plugin.ts:2025)只识别 `choices[].delta.{content,reasoning_content,reasoning}` 三个字段(:2079 字段循环)。文本不在这三字段内的帧,走**无过滤原始转发出口**: | 出口 | 位置 | 条件 | |------|------|------| | E1 | src/plugin.ts:2030-2031 | `!Array.isArray(choices)` → 整帧原样转发 | | E5 | src/plugin.ts:2154-2156 | 尾部 fallthrough(choices 存在但无可管理文本字段)→ 原样转发 | | parse-fail | chat 管道 ~src/plugin.ts:2385;responses 管道 ~src/plugin.ts:2884 | JSON.parse 失败 → 原样转发 | `processAnthropic`(~:2175 / :2178 / :2193,其中 :2193 覆盖 input_json_delta 等工具参数字段)与 `processGoogle`(~:2235 起 parts 循环外同类 fallthrough)存在同构出口。 ## 量化与边界(诚实声明) - 用户方 8 类合成帧形状 × 4 个真实 bundle 回放矩阵:全部绕过过滤器(message.content / array content / delta.text / responses_shape / anthropic_shape / no_choices_array / array_string_content 等)。 - 用户方 §6.5 自述:session-cf6e2c53 的 **209 处生产可见泄漏**在任何 bundle 上都无法用这 8 类形状复现(真实帧是普通 delta.content 片段,而它们在任何 bundle 上都不漏)——因此本 issue 定性为**已验证存在的潜在通道**,生产占比未定案。 - 上述新样本(零日志 + 完整合法标签)与出口层机制吻合(合法对在过滤器内必剥必打日志,故零日志 ⟹ 未入过滤器);但缺该会话 raw SSE,尚不能定位具体帧形状。 ## 修法评估 1. **【治本 · owner 决策】content-anchor**:以 `m\d{4,}` 内容锚点匹配替代字段白名单/名称白名单(PR #2211 的 DEGEN_PAIR / degenCloseAfterRef 已局部采用此思路)。改动面大(触及管道语义与两种压缩模式),需 owner 拍板方向。 2. **【安全中间态】按形状逐字段识别**:对已知 wire 形状的文本字段套用现有 wire-shape stripper 纪律(字段级 rebuild,参照 hadEchoText 路径),不做整帧处理。 3. **【禁止】write() 处全帧过滤网**:与 #1039 冲突——tool-call arguments 走同一 write/rawEvent 路径且必须 byte-exact,整帧 strip 会静默损坏用户意图字节。 4. **【先行可观测性 · 已加在 PR #2211 分支】** E1/E5/parse-fail 出口的 residue 审计日志(log-only,零字节变更;`openaiFrameHasToolCalls` 排除参数帧防误报)。发布后下次零日志泄漏,日志直接指认出口。 ## 取证需求 再次出现零日志泄漏时请保留:① 该会话 bili.log 全文(每行带 `[v=…]` 版本戳);② raw SSE 或 dsh `session.v4.jsonl.zstd`(多帧 zstd,流式解压,`rec['data']['stream']` → 'text-chunks')。有帧原文即可把 209 处未解释泄漏定案到具体形状。
Activity
ranxianglei commentedon Oct 6, 2026
[bot] 🏷
审核结论(机制已在 master @ 5e43209 逐项代码验证)
① 是什么问题:可见文本位于「按 wire 的受管字段白名单」之外(或帧 JSON 解析失败)时,整帧字节原样转发,从不进入 tag-echo 状态机——且这些出口不留任何
[tag-echo]日志,泄漏因此不可归因。② 什么原因导致的:过滤覆盖由字段名白名单定义(openai
choices[].delta.{content,reasoning_content,reasoning}@ src/plugin.ts:2073;anthropic 仅 thinking/text delta;gemini 仅parts[].text),白名单外的帧全部走原始转发出口。同一机制下两个独立缺口:(a) 覆盖缺口——未受管文本字段绕过过滤;(b) 可观测性缺口——出口零日志,这正是 209 处泄漏无法定案的原因。issue 点名的每个出口都在代码中确认存在(master 行号与 issue 略有漂移:E1 :2024、E5 :2145、chat parse-fail :2367、responses parse-fail :2831、processAnthropic :2166/:2169/:2184、processGoogle :2222/:2343)。你的推断成立:合法对在受管字段内必触发 gate→必剥必打日志,故零日志 ⟹ 字节从未入过滤器。③ 怎么修复的:
10b978b53):auditRawForward()在 openai E1/E5 + 两管道 parse-fail 出口打 residue warn,openaiFrameHasToolCalls排除参数帧。时间线说明:本审核开始时分支头是dbf4f1b4f,当时尚无出口审计;该 commit 在审核期间推上分支,当前头83fb43f74下 issue 的「已加」表述准确。m\d{4,}本身就是 kernel 的 ref 格式,会出现在合法用户数据里——纯内容 gate 会在入口处重新引入 [bug] 插件透传会剥掉工具调用参数里的 render tag(arguments 流挂了 tag-echo 过滤器) #1039 在下游禁止的那种歧义,最后还是要维护一份不小于白名单的排除清单;④ 是否回归:可观测性补全无回归——log-only、零字节变更,排除守卫保证 #1039 参数字节不进审计(无误报噪声、无行为变化)。选项 1/2 无论选哪个,其 PR 会自带行为变更披露(旧值→新值+原因)。
⑤ 是否破坏缓存:不涉及——不动任何影响前缀缓存的字节、重试/幂等或去重键。
⑥ 是否改了设计方向:无转向;选项 2(若采纳)是扩展现有的按 wire permitlist 模式,不是替换它。
⑦ 是否引入新配置:无——纯日志,沿用既有
[tag-echo]命名空间,无新 env/config/默认值。CI 旁注:PR #2211 头
83fb43f74目前 ubuntu-24/e2e/各 lane 已绿,三个 test job 写作时仍在跑。取证需求收到:下次零日志泄漏请保留 ① bili.log 全文(每行
[v=…]戳)② raw SSE 或 dshsession.v4.jsonl.zstd。出口审计上线后,日志行会直接指认出口,帧原文把形状钉死。判定:机制确认真实存在(已验证潜在通道,生产占比按你 §6.5 维持未定案)。可观测性补全进行中(#2211 分支上的 log-only commit);过滤语义方向(1 vs 2)等你的拍板,拍板前不动管道语义。
fix(#2248): extend raw-forward exit audit to anthropic/google/respons…
ranxianglei commentedon Oct 6, 2026
[bot] 🏷
可观测性补全已推送(PR #2211 分支,commit
7977aeb89)出口审计网已铺全。在
2026-10-06_degen-close-strip分支上补了一个 log-only commit(零字节变更),把auditRawForward扩展到 #2248 机制表列出的全部残留哑出口:input_json_delta(参数字节)googleFrameHasNonText:functionCall/functionResponse 等结构化/用户数据)responsesFrameHasToolCalls(function_call/custom_tool_call 参数流、顶层 arguments、item.type 为调用类)测试:新增
tests/issue2248-exit-audit.test.ts(14 个用例)——钉住全部 10 个审计出口(warn 必发 且 逐字节原样转发)、3 条参数帧排除、2 条干净负控;顺带把 #2190 那 4 个当时没有直接测试的出口也钉上了。验证(本地定向,全量交给 CI):typecheck 干净;新文件 + issue2190 + tag-echo 共 86/86 过;7 个相邻管道回归套件(tag-strip chat/responses、#1039 verbatim、nameless-toolcall warn 计数、finish-tail 排空、empty-turn retry、marker-echo)95/95 过。CI 在新头
7977aeb89上重跑中。本轮七问
<acp …>标签会漏到用户可见输出(附根因、量化与修法建议) #2190 commit)只覆盖了 openai E1/E5 + 两管道 parse-fail;机制表里的同构出口未被铺到。[tag-echo] raw forward carried echo-residue-shaped byteswarn 行。这是功能本身(可观测性),不是漂移。[tag-echo]命名空间。判定:#2248 的可观测性部分(选项 4)至此完整覆盖四根 wire 的全部原始转发出口,收工条件达成;PR #2211 待 CI 绿后可合并(合并由你操作)。过滤语义方向(选项 1 vs 2,我的建议是 2)仍等你拍板,拍板前不动管道语义。
ranxianglei commentedon Oct 6, 2026
[bot] 🏷 取证包已核验完毕 —— 216 条帧给出了定案级发现,出口层缺口从「潜在通道」升级为「零日志会话的生产主路径」。
决定性发现(共享判定式,可复算)
判定式(公开,双方可各自重算):单元 = 一条 dsh
data.stream'text-chunks' 记录;泄漏 span =m\d{4,}\s*后紧跟</word>(word =[A-Za-z][A-Za-z0-9]{0,15});良构 = word 属 acplike 名集(acp/apc/cap/cpa/pac/pca ±1 个 [aAcCpPiI] 插入,大小写折叠)。对
cf6e2c53_textchunks.jsonl全量 216 条:三条证据链闭合:
[tag-echo]/stripped行 = 0(对照组 1f3d2c0f 有 120)。processOpenai与 tag-echo-filter 在 v0.1.185 ↔ master 相关区域逐字节相同(v0.1.185..master 的 plugin.ts 差异仅 8+/16-,全部位于 handlePluginTool ≤L1560;tag-echo-filter.ts 零差异)。良构对只要进入过滤器循环,必被剥除+打日志——两个版本都如此。[acp-usage](settleUsage 只在 plugin strip pipe 的 SSE 循环收尾时打)⟹ 628 个请求都经过了 strip pipe,且帧是合法 JSON(usage 数值齐全)⟹ parse-fail 出口基本排除。⟹ 唯一自洽解释:这些帧的文本不在
choices[].delta.{content,reasoning_content,reasoning}受管字段里,走了 E1(无 choices 数组原样转发,src/plugin.ts:2030-2031)或 E5(尾部 fallthrough 原样转发,:2154-2156)。这就是「你们回放不漏、生产在漏」差额的答案:回放时把texts[]重建进了标准 delta.content 形状,而生产帧的文本落在别处——提取动作本身把关键结构事实抹掉了。你们漏掉的东西就是这个:jsonl 里只有texts,没有帧信封(envelope),而信封才是本案的物证。其他核验结果
[acp-drift] fold coverage mismatch(如 258/446 covered ids present)×17、[fold-reconcile]re-anchor warn ×535(每数秒一条)。上下文里活性标签材料多 ⟹ 回显率高,解释了为何此会话泄漏量特别大。属 Fold-state reconciliation: classify resent-history divergence (edit/fork/new/system-only) and make compression blocks re-anchorable chain units #1921 家族观察项。收口路径(下次出现时一步定案)
ACP_DUMP_SSE(envACP_DUMP_SSE或 billion-context.json 的dumpSse,src/config.ts:1148)→ raw SSE 落盘,帧信封直接可见,一次定位到具体字段/出口。状态更新:机制「已代码级验证」→「生产主路径已定案(零日志会话 ~99% span)」;剩余未定案项收窄为单一问题:文本具体落在哪个非受管字段(需 ACP_Dump_SSE 或审计日志实例)。issue 保持打开至 owner 决策 + 下一实例取证。
ranxianglei commentedon Oct 6, 2026
[bot] 🏷
状态更新:PR #2211 新头
7977aeb89(含本 issue 的出口审计补全)CI 24/24 全绿,mergeable。可合并,合并由你操作:#2211本 issue 侧待办只剩你的方向拍板(选项 1 content-anchor vs 选项 2 按形状逐字段识别;我的建议是 2,理由见上一条回复)。拍板前我不动管道语义;issue 保持打开。
ranxianglei commentedon Oct 6, 2026
[bot] 🏷 状态更正(采纳对方 r4 文档的收窄)+ 三项新证据
① 定性收窄(正式采纳):定案的是「未进过滤器」(
[tag-echo]=0 是硬证据,628 流 × 0 行);未定案的是「为什么没进」——E1/E5(文本不在choices[].delta.{content,reasoning_content,reasoning})是首选假设,但尚未与「进了过滤器却静默失效」排他。此前评论「唯一自洽解释:走了 E1/E5」「生产主路径已定案」措辞超出证据幅度,按本条更正。另撤回「提取动作抹掉信封」的说法:对方 0.2 节证明 dshstream[]只有 4 类条目、从未落盘帧信封——缺口在 dsh 记录格式,不在提取脚本。② 跑了对方的 blob 比对命题(
git diff v0.1.185..master -- src/plugin.ts,实测非转述):plugin.ts 实际差异 8+/16-(净 -584 B,不是 +5,910 B),4 个 hunk 全部位于 import 行与handlePluginTool(L14/L1470/L1506/L1532);出口区域零改动(processOpenai L2025+、SSE 循环 L2380+ 无 hunk)。tag-echo-filter.ts 逐字节相同(双方一致)。即「两版本都不触碰出口层」在 blob 层面成立——但它只证明出口代码版本间不变,不构成 H1/H2 的裁决(裁决仍需审计日志实例,同意对方的方法)。③ H2(进了却没生效)的状态机排除论证(对方说「我没做这一步」,补上):在 0.1.185 的
createTagEchoFilter中,良构 acplike 对要不经 drop+日志地通过,只剩三条潜在通道,逐条排除:(a) swallow-mode 预算释放——进入 releases 模式的所有入口(LONE_OPEN 命中、bare-open 续接)都先调drop()(触发 onDrop 日志),零日志流不可达;(b) flush 尾释放——只在已进入 swallow 模式后可达,同 (a);(c)!m分支 hold 超限释放——含完整 acplike 开标签的缓冲必先被 LONE_OPEN 命中(m 非空),到不了该分支。叠加:gate 侧任何以<开头的分片都会被 PARTIAL_TAIL 第三分支(<\/?[aAcCpPiI]*$,单独一个<也命中)拉进状态机,良构对无法走字段级 fast path。再叠加过滤器的确定性(每个请求新建实例、纯输入函数)与对方四 bundle 回放(同一字节序列 → 干净剥除):H2 要求生产时该字段的字节序列 ≠ dsh 所记录,而对方 233/233 三重相等校验使这一点不太可能。结论:H2 在 bili 内部已近乎排除,E1/E5 为唯一自洽解释;残余替代解在过滤器之外(host 渲染层等)——但协议集中度数据(37 个泄漏会话中 openai 占 35,anthropic 1、unknown 1)使其也不利:host 渲染层应与协议无关。④ 审计网已补齐全 wire:分支上新增提交 7977aeb 把 raw-forward 审计从 openai E1/E5+parse-fail 扩展到 anthropic/google/responses 的同构出口(log-only,#1039 参数帧排除保留),新增 tests/issue2248-exit-audit.test.ts 钉住全部 10 个出口(warn 必发 + 字节原样)。下次任意 wire 上出现零日志泄漏,日志直接点名出口或维持零日志(⟹ 查过滤器外层面)。
收口条件不变:owner 对 content-anchor 方向拍板 + 下一实例的 ACP_DUMP_SSE(env/config
dumpSse)或审计日志命中。ranxianglei commentedon Oct 6, 2026
[bot] 🏷 H2 反例核验结果(#2190 线程对方提出的「80 预算静默释放」子路径):在 0.1.185 真代码上实证不成立。
两处 trace 错误:① 截断开标签(无 >)停在 held 态,其预算是 TAG_OPEN_CAP=4096(确定性尾部),不是 SWALLOW_CAP=80——后者只在 swallowUntilClose 模式内生效,而进入该模式的每条路径都先 drop()(打日志);② 确定性尾部超 4096 的动作是 drop 丢弃,不是 release 原样吐出(src/loop/tag-echo-filter.ts:725-727);非确定性 release 分支在 0.1.185 结构不可达(模糊尾部 ≤6 字符 < HOLD_LIMIT=128)。
六场景实证(真过滤器实例、计数 onDrop):A 截断开+90 正文 EOF / B 截断开+4200 / C 完整对逐字符 / D 完整开+90 正文(真正的 80 预算路径)/ E 截断开+4200 闭标签迟到 / F 完整开+200 正文+闭 —— 全部 ≥1 次 drop(日志);D/F 释放的是正文 body(#1720 保护),E 的 ref 以裸文本漏出但无标签形态且日志在先。「零日志 + 完整对通过」无通道。gate 侧:任何
<开头分片进状态机,held 期 pending() 拉过全部分片,完整对骑不了 fast path。已钉回归测试:commit f5e9eb4(tests/issue2190-degen-close.test.ts,A-F 场景,16/16 绿)——该不变量从此由测试守护。issue 正式立场不变:定案=未进过滤器;未定案=为什么没进;终裁=审计日志实例(ACP_DUMP_SSE 或 auditRawForward warn)。
ranxianglei commentedon Oct 6, 2026
[bot] 🏷 状态表精度更新(v0.1.185 源码级核验后):「未进过滤器」现精确定义为两层——(A) 字节未被任何 tag-echo 实例处理(零日志硬证据);(B) strip pipe 本身执行了(628 条 [acp-usage] 的发射点全部位于三个 strip pipe 内:applyUsageSample @ plugin.ts:1963/2633/3186/3203;pluginMode lane 无 raw-forward 旁路,openai+stream ⟹ pipePluginChatWithStrip @ server.ts:6940)。两者调和机制 = 按字段惰性实例化(filterFor @ plugin.ts:1757-1764,field:index 首 delta 才建实例):非受管字段上的字节结构性零日志。对照会话同二进制同函数打出 120 条 stripped ⟹ 「路径无过滤器」证伪。未定案项不变且收窄为:具体哪个非受管字段/出口(E1/E5/parse-fail),终裁 = 审计日志或 ACP_DUMP_SSE。
ranxianglei commentedon Oct 6, 2026
[bot] 🏷 补充:「日志里为何没有帧形状痕迹」的代码级答案 + 一个现有数据即可执行的判别实验
① 帧形状在 0.1.185 里结构性不落日志:processOpenai 函数体(plugin.ts:2025-2157)日志调用数 = 0(grep 实测),E1/E5/parse-fail 均为静默路径;唯一帧内容派生日志是剥除时的 [tag-echo]。故「日志无帧形状」是 E1/E5 的预测值而非反证——静默即签名(auditRawForward 即为此而建,随 #2211 发布)。
② 新判别实验(现有数据可执行):E1/E5 下无文本回合若无工具调用,retryEmptyTurn(#732/#821)必触发并留 "degenerate terminal turn … continuation nudge" 日志行。cf6e2c53 实测零条(唯一 degenerate 命中为 :3521 degenerate-fold 压缩观测,无关)。⟹ 若任一泄漏回合零工具调用 ⟹ E1/E5 被现有数据直接证伪;若全部泄漏回合含工具调用 ⟹ 与 E1/E5 自洽。当前 jsonl 导出仅 text-chunks 行无法判定,待对方从 dsh 完整 stream[] 导出泄漏回合的工具调用存在性。
③ [tag-echo]=0 第三次独立确认(session 文件 / window 切片 / 对方 summary 一致);对照 120/120 口径已对齐(完整日志 29,305 行 vs window 部分窗口)。
ranxianglei commentedon Oct 6, 2026
[bot] 🏷 Round-7 判别实验裁决:20 条「零工具调用+无重试日志」反例已消解——第三个抑制条件定位到 v0.1.185 src/plugin.ts:1859。
retryEmptyTurn 谓词链(行号实测):调用点 :2426 要求 turnTerminal≠undefined(openai 分支只从 choices[].finish_reason 读取,:2401-2411——终端检测与文本受管共用同一帧契约);:1843 visibleTextChars/sawToolUse 抑制(解释同会话 52 个正常纯文本回合为何也无重试行——它们有受管文本,本就不重试);:1844 CLEAN_TURN_REASONS={"stop","end_turn","stop_sequence"}(20/20 stopReason=stop ✓ 通过);:1859
!sawThinking && !sawStrippedEcho && releasedMarkupChars === 0→ return false(#732/#821「真正裸回合=上游自己的空回答,重试双倍计费」豁免)。E1/E5 读法下那 20 条的五个输入全部被现有数据钉死:visibleTextChars=0(非受管字段)、sawToolUse=false(导出证实)、sawThinking=false(0 个 reasoning-chunks 条目)、sawStrippedEcho=false(零 [tag-echo] 行,标志只由剥除回调置位 :1734/1739/1744)、releasedMarkupChars=0(H2 不变量:释放必先经已打日志的 drop)⟹ :1859 必返回 false ⟹ 零重试行是 E1/E5 的预测值。标准帧框架仍死(H2 不变量 + 可见泄漏双矛盾)。seq=6548 逐字节核过(len=94、m01306 直跟 DSML 闭名属实),但受管路径下 0.1.185 必先打开标签 drop 日志 ⟹ 与其余 19 条同出口类。parse-fail 逐帧仍不可区分(同样静默),审计网下次点名。
设计边界记录(owner 参考):#732/#821 重试网对非受管字段回合结构性失明(「合法沉默」豁免吞掉本失败类的全部带内信号);补偿控制 = #2211 auditRawForward;根治需 content-anchor(本 issue 待拍板方向)。
状态:未定案项 = {E1, E5, parse-fail} 至少其一;裁决路径不变。
Merge pull request #2267 from ranxianglei/2026-10-07_acp-tag-unified