仿照这个对billion-context-dsh进行bug扫描 https://github.com/ranxianglei/billion-context-pi/issues/305
Activity
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 收到。计划(对齐 pi#305 的方法,但用 billion-context 本仓的 bug 史做对照透镜):
Tyan66666/billion-context-dsh源码通读。先占位,随后出完整结论。
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 ## billion-context-dsh bug 扫描报告(对照 billion-context bug 历史)
扫描对象:
Tyan66666/billion-context-dshv0.2.19 @08c68d5(clone 到本地逐文件读完 src/ 全部 12 个模块 + tests/ 覆盖核查 +npm install后读宿主依赖源码取证)。方法同 pi#305:拿 billion-context 自己的 bug 史(CHANGELOG 全量 + git log)当透镜逐类映射,先与 dsh 已开的 #108–#111 查重再落新 issue。✅ 新提 2 个 issue
/acp decompress输出无上限、无分页(src/tools.ts:549-572、src/commands.ts:115-131):大 block 恢复要么一次性灌爆上下文(抵消压缩收益、可能触发 #108 的 emergency 重注入路径形成"解压→爆→再压"震荡),要么被宿主 tool-result pruner(8192/4096/1024 档)静默截断成无用残片且模型无法续取。bc 侧对应物是 decompress 的toFile逃生通道;dsh 没有文件系统通道,建议 offset/limit 分页或硬上限+显式截断 footer。AcpStateStore.states(src/state.ts:101,delete()全仓库零调用方)、lastNudgeTurn(src/index.ts:198)、compressCallIdsToHide(src/index.ts:200);引擎只注册了internal/service/session/event/agent/pre-step,无任何 session-end 钩子。长驻多会话宿主下内存随"进程见过的会话总数"线性增长(bc 同类问题经 bounded session pool 修复过)。🔍 重点验证后排除的嫌疑(有证据,不重复报)
resolveTokenCount(src/nudge.ts:54-71)优先信sessionProjections.contextPressure.projectedTokens,若纯 provider-anchored,则 compress 成功后的下一个 pre-step(新响应未到达前)会读到压缩前的高水位 → 误触发 nudge/emergency。取证结果:@deepseek-ai/dsh-token-meter的 contextPressure fold =max(0, pressureTokens + surfaceTokens − sampledSurfaceTokens),其中 surface 总量在每次 replace 时消费 shadow-price claim(deltaTokens = tokens(replacement) − claim.tokens(shadowed))——压缩落账即扣减,不等下一次 provider usage。dsh 的 shadow-price 协议(compaction/summary/prune与 replace 同步相邻写入)正是为这个设计的,该通道干净。adjustBoundariesForReasoningPairs,applyCompression 已调用);② dsh 投影只产出text/tool-call/tool-resultCoreMessage(src/messages.ts:119-175),从不发reasoning消息,且压缩单位是整条 surface event、不可能拆散单条 assistant 事件内部的 reasoning+text。region.ts:1061每个 shadowed seq 都调sessionEventsOf(session)会整表重建;实际 dsh-session rc.6 的eventsgetter 是 memoized(eventsSnapshot ??= Object.freeze([...this.log]),append 间复用),单次调用 O(1)。撤回独立报障,fix: abort compress loop on client disconnect + drain race + session inFlight race #109 仍是真实 perf 问题。📌 已知 #108–#111 的补充细节(不另开 issue,供修复参考)
hideSurfaceSeqs对每个隐藏节点调findOpenTurn(全日志扫描,region.ts:613),orphan 清理循环里就是 O(K×N)(region.ts:765-771);allLogMessages每次内部还要跑一遍buildToolCallIndex全量扫描(messages.ts:178-183),即 fix(responses): add mutatedThisTurn guard + use MAX_LOOP_ROUNDS in non-stream loop #110 的全日志成本至少 ×2。index.ts:301)+buildCompressibleSeqRanges内又一次(region.ts:841,且在决策路径里改日志)。hideCompressToolPair(region.ts:631-668,microtask 延迟执行,正确性已处理但仍是改写)+ 每 pre-step 的 orphan strip。🧹 Minor(按惯例只在报告里提,不开 issue)
index.ts:229-268注释声称internal/service和ready双路重试,代码只监听internal/service;若toolsrow 始终不出现,system prompt + nudge 照常生效但 compress 工具不存在 → 模型被引导调用不存在的工具(bc#217 "fail-fast capability claims" 同类)。建议加一条 loud warning。/acp compress缺 orphan-strip 前置:handleCompress强制先stripOrphanedSurfaceToolMessages(tools.ts:296-302,issue release v0.1.6 #18 的教训),而/acp compress(commands.ts:88)直接resolveSurfaceRange——崩溃残留 orphan 后,手动命令会撞上工具路径本可自动清理掉的 balance 错误。stateFor初始化时rebuildKernelBlocks跑两遍(state.ts:104-116+nextBlockIdAfter于state.ts:90-98),一次性小浪费。windowFor探测失败永久缓存(fallback 128K):属 initSessions: sort key (createdAt vs savedAt) doc/code mismatch #63 文档化权衡,label 已明示 "restart to re-probe",一致,不算 bug。结论
dsh 的核心事务层比预期扎实:fail-fast 预校验 + 补偿性
compaction/end(region.ts:389-464)、partial-failure 语义(compress 单 range 失败不毒化其余)、双嵌套参数容错 + envelope peel 后补 items 级校验(nudge 死循环的两个历史坑都已堵)、shadow-price 协议让 token 计量与宿主完全同源(#54 类 CJK 超扣从机制上消除)。真正的风险仍集中在已开的四个(#108 emergency 无上限 > #109/#110 perf > #111 cache 测试缺口)+ 本次新增的 #112/#113。ranxianglei commentedon Sep 6, 2026
还有内核他也没更新 结合内核继续扫描.还有很多其他功能的 比如多模态,你拉一下我们的issue看看,最近关闭了几个是 大多数是bug
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 收到,继续第二轮扫描,范围扩大为:
有结果就回帖。
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 ## 第二轮扫描报告(内核对照 + 最近关闭 issue + 多模态专项)
1️⃣ 内核对照 → 新提 dsh#116
dsh 钉
acp-kernel@0.0.29,主仓现在钉 0.0.54——落后 25 个版本。我把两个版本的 dist 拉下来逐模块 diff 了:decideNudge新增minPressureBenefit闸门(默认max(5000, 1%×window)),emergency/pressure 注入要求剩余可压 ≥ 该值——直接缓解 refactor: remove V1 streaming loops (V2-only) + dedup forward headers/routes #108 的"无可压内容仍反复注入"分支;② 新增firstSightMassReady:大初始上下文的会话在 ≥45% usage 时立即触发 nudge,不再等增长;③ T2 触发加了计数维度(≥5 个 block)。parseCompressArgs与 dsh 自研的 unwrap+validate(tools.ts:222-290)功能重叠,升级后可收敛到内核单一实现。2️⃣ 最近关闭的 bc issue 当透镜(9/5–9/6 一批)
拉了最近 40 个 closed issue 逐条映射:大多数是 proxy 专属(preflight exhaustion/livelock #574/#330、passthrough 静默关死 #405、side-request 误降级 #546、SSE TextDecoder CJK 损坏 #541、dump GC #277、persist EPERM #367)——dsh 没有 proxy/persist 层,N/A。能映射的三条:
handleStatus每次调用都用最新 log 投影重跑 processTurn(tools.ts:732),不存在 prepare-time 快照。3️⃣ 多模态专项 → 新提 dsh#117
grep 确认 dsh
src/零处 image 引用,而宿主dsh-llm已有ImageBlock(user content)+ 共享 image walk(capability gating / text-only serialization / compaction 三类策略)——平台能带图,引擎视而不见。断点链全部代码级验证:extractText(messages.ts:27-41)只取 text 块 → image-only user message 投影为空 → 无 ref、无 bare-seq 边界资格(hasPlainRef 要求非空文本,region.ts:110-132)→ 模型拿图片消息当 compress 边缘时只会得到莫名其妙的 "no tool-pairing-balanced range" 或意外扩张;issue 里给了分层建议(最小修复:标尺标注 + meter 计价 + handleCompress 补保护;完整方案:image 占位 CoreMessage 全链路可见),供 owner 拍板。
小结
本轮新增 #116(内核漂移,含行为差异清单)+ #117(多模态盲区),另向 #108 补了两条修复参考。累计两轮:dsh 侧共 4 个新 issue(#112/#113/#116/#117)+ 3 条已知 issue 补充。核心事务层依旧扎实;风险排序更新为:#108(emergency 死循环)> #117(多模态账目错乱,图片会话必现)> #116(内核漂移,行为分叉)> #109/#110(perf)> #112/#113 > #111。
ranxianglei commentedon Sep 6, 2026
看是否可以提交对应的pr
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 可以,开始提 PR。按风险从低到高排:
offset/limit参数 + 显式截断 footer,工具与/acp decompress双入口同步;AcpStateStoreLRU 上限(淘汰走既有 rehydration 路径,安全)+lastNudgeTurn同待遇;跨仓流程走 fork(ranxianglei/billion-context-dsh)+ 跨仓 PR,base 用对方默认分支。有结果逐个回帖。
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 可以。按之前定的顺序开始提 PR(跨仓 fork → Tyan66666/billion-context-dsh):
✅ PR 1/3 已开:dsh#118 —
decompress分页(#112)[messages X..Y of Z]页脚 + 明确续读提示;工具参数与/acp decompress <blockId> [offset] [limit]都支持分页;小 block 行为不变。继续:PR2 = #113(per-session Map LRU 驱逐),接着尝试 PR3 = #116(acp-kernel 0.0.29→0.0.54,本地全绿才提)。完成后统一汇报。
ranxianglei commentedon Sep 6, 2026
[bot] 🏷 三个 PR 全部提交完毕(跨仓 fork → Tyan66666/billion-context-dsh,均基于 main @ 6348af8 / v0.2.20——扫描期间上游合了 v0.2.20 #106,我已对齐;本地 typecheck/test/build 全绿,dist 按对方 AGENTS.md §4 一并提交):
decompress//acp decompress分页:默认每页 100 条 +[messages X..Y of Z]页脚 + 显式续读提示(offset/limit参数);大 block 不再一次性灌入被宿主 pruner 静默截断AcpStateStore.states+lastNudgeTurn;驱逐无损性已论证(bN 编号/消息 ref 从 append-only 日志确定性重建)+ 新增回归测试验证"驱逐后重水合与活状态不可区分"。顺带修了重水合不续nextRunId的潜在 runId 碰撞Map.set对已存在 key 不刷新 MRU 位置)每个 issue(#112/#113/#116)下也留了指向对应 PR 的评论。
未提 PR 的:
合并都是 maintainer 侧操作,我不代合。PR 落地后建议把 #111(prefix 字节稳定性回归测试)作为独立小 PR 跟进,我可以接着做。