You signed in with another tab or window. Reload to refresh your session.You signed out in another tab or window. Reload to refresh your session.You switched accounts on another tab or window. Reload to refresh your session.Dismiss alert
{{ message }}
Repository navigation
After an interleaved metadata refresh, the entire history of the same session is resent in a different form, and already-collapsed content fails to re-anchor. | interleaved 元数据刷新后,同一会话整段历史换形态重发,已折叠内容 re-anchor 认不回来 #3301
我为此写了一个转换程序:https://github.com/yangyaofei/acp2bili (Python,无第三方依赖)。它从 opencode 数据库读原始消息,按 billion-context 的规则重算 id,再把旧记录写成会话状态。它同时能在本地复现 id 计算,所以下面的测量也用它。
我是在转换过来的一个大会话上看到这个问题的,但原因不限于转换:只要消息发给模型时的 form 变了就会触发,范围见下。
问题
一条消息的 id 匹配不上(旧 id 在已有记录里找不到对应)时,这条消息就不能算作已被压缩,只能把原文发给模型。
于是上下文变大;之后它又被重新压缩,上下文回落到原来的水平。
内容不会丢,代价是每次多花一轮 token 和等待时间。
我用 opencode 时会经常换模型(额度用完就得换),换的时候最容易遇到。
现象
同一条会话,连续几次对话的日志里反复出现这一段。
[fold-reconcile] resent history drifted: 986 covered id(s) missing with no anchor match
— mutation (content edit invalidates content-hash refs, fold silently lost)
or client-side deletion/truncation (benign, message no longer on the wire) (#1921)
Activity
[-]interleaved 元数据刷新后,同一会话整段历史换形态重发,已折叠内容 re-anchor 认不回来[/-][+][Bug] opencode 车道: 模型元数据 interleaved 刷新后整段历史按另一种形态重发,已折叠内容无法 re-anchor(drift 986)[/+][-][Bug] opencode 车道: 模型元数据 interleaved 刷新后整段历史按另一种形态重发,已折叠内容无法 re-anchor(drift 986)[/-][+][Bug] opencode: 换模型或模型元数据刷新后已压缩内容认不回来(上下文先涨后落,986 条对不上)[/+][-][Bug] opencode: 换模型或模型元数据刷新后已压缩内容认不回来(上下文先涨后落,986 条对不上)[/-][+][Bug] opencode: 已压缩的一部分内容认不回来,上下文先涨后落(换模型时反复出现)[/+][-][Bug] opencode: 已压缩的一部分内容认不回来,上下文先涨后落(换模型时反复出现)[/-][+][Bug] opencode: 已压缩的一部分内容匹配不上,上下文先变大再回落(换模型时反复出现)[/+]ranxianglei commentedon Oct 15, 2026
(ai: vllm/qwen3.8-27b)
查重:不重复。 与 #2636(pi 跨模型重序列化漂移,turn-key 通道修复)、#2915(dsh 换模型 id 重铸,顺序中心 reconcile 修复)同属「宿主换形态重发、内容哈希身份失效」机制家族,但触发面是新的:opencode lane + openai chat completions + 模型元数据表刷新驱动的 thinking 形态翻转(无切模型)。#2938 是另一机制(host-id 侧信道,dsh lane)。现有各修复都不覆盖本 case。
机制核验(对源码逐条验证过,不只采信描述)
interleaved?: boolean | string | {field}字段(packages/core/src/models-dev.ts,v1.19.0/v2.0.24 两个版本都在)。它决定宿主把带思考的 assistant 历史消息以哪种 wire 形态回发:设了字段名 → 思考进该独立字段({content:正文, reasoning_content:思考},一条消息两个字段);未设/变化 → 按版本走默认路径(v2.x 对无结构化细节的思考仍回reasoning_content,字段改名或清空则思考整体消失或进别的字段)。元数据表一刷新,整段会话所有带思考的历史消息在之后每条请求里全部换形态——与「没人改配置,10-13 fold、10-14 rc」完全吻合。think/thinking/```thinking)与字段形态同 id;不带标签的拼接是另一个 id 空间,这是残留缺口。<thought>),键就对不上。层次判断:根因是宿主按不可见、可变的状态(元数据表)重序列化历史字节——bili 拦不住也不该拦(那是宿主行为,不是 wire 违规)。要修的是 bili 的身份层:折叠时把该消息所有可推导形态一并登记,宿主下次无论发哪种形态都有命中。与 #2636/#2915 同一谱系(顺序为中心、hash 为辅助的 fail-soft 辅助通道,唯一解要求不变)。不动 kernel(无标签拼接天然不可逆拆分,不猜拆,只做正向推导+查询时现算)。
修复方案(立即开工,一个 PR 闭环)
两件非阻塞的事想请你配合
~/.local/share/billion-context/sessions/index.db的messages/refs行数 vs 账本覆盖规模。确认导入路径记录缺失的话我重点验那边。开工了,PR 链接和八问结论随后贴。
ranxianglei commentedon Oct 15, 2026
(ai: vllm-qwen/qwen3.8-27b)
修复已提交:PR #3316 https://github.com/ranxianglei/billion-context/pull/3316(`Closes #3301`)。按八问汇报:
1. 是什么问题
宿主元数据表刷新后,同一会话所有带思考的历史消息换了一种 wire 形态重发(思考放
reasoning_content字段 ↔ 拼进content正文)。内容没变但 id 全换,fold re-anchor 认不回来:每条请求都报covered id(s) missing with no anchor match,已折叠原文重新上线、上下文涨、再压一遍。你的实测数据(986 ≈ 2 × 带思考消息数)正好印证「每个 thinking turn 的两个拆分核都丢失」。2. 什么原因导致的(两层,都已读码钉死)
<thinking>/think/```thinking 标记或裸拼接)时,合并核的 key 与拆分锚点的 key 对不上 → 唯一解门诚实跳过 → missing。你的临时办法(登记全部可推导形态 id)能归零,正说明缺的就是这个维度。nextOrder = plan.newOrder.slice(-MAX_ORDER)把 order backbone 向前滚了,旧 id 永远离开 backbone,claim pass 只遍历 backbone 内的 missing id → 再也没机会认领。你长跑会话的早期折叠块大多落在这个窗口。3. 影响范围与严重程度
所有「压过历史 + 宿主元数据表刷新改变思考消息形态」的会话;触发条件窄但后果重——该会话此后每条请求整段漂移、折叠内容重新上线(旗舰会话 986 条)、上下文膨胀再压缩,持续浪费 token 与时延。正确性不受损(内容不丢,只是重复上线),属成本/活性问题,长会话下体验明显劣化。
4. 怎么修复的(疏:让机制覆盖这种 churn,不堵症状)
extractThinkingMerge()——kerneldemoted-thinking.tsFORMS 的逐字节镜像(offset-0 纪律、多块拼接、glue 消费),只做 key 派生、不参与 identity minting。候选侧与锚点侧都改为「裸 key + 解包成对 key」双登记,rc↔merged 双向互认(N→1 / 1→N 走既有 claim 路径);歧义多解仍诚实跳过。planReconciliation之前重建锚点——翻转那一轮就能直接认领,而不是等一个永远不会来的回补窗口。每轮上限 256 个 id;内部簿记键foldStoredTried防止反复查已确认无行的 id(索引不可用 ≠ 无行,允许重试)。稳态零成本:新锚点有 p/x 直接短路,reconcile off 时四个 wire 站点根本不查。decompositionLog——转换器把原始分解写进记录,ingest 最先 intern(seq 最低)、delta planner 在其存在时强制全量路径、save 一次性消费(payload 只搭一次车进索引,磁盘记录永不携带)。覆盖外部导入会话;这也回答了你「待确认的点」:导入会话若索引库没有这些行,re-anchor 确实失明,现在有了正规写入通道。5. 是否有回归问题
未发现回归。逐项核对既有行为:exact-id / toolCallId / twin / simhash / order-bracket 各通道、唯一解门、长度护栏、MAX_ANCHORS、backbone 语义、#3133 delta 快速路径均未改变;p-backfill 分支与 master 逐字节一致(git show 核对过)。定向回归 113 pass / 0 fail / 1 pre-existing skip(fold-reconcile 66、issue2636+2915 15、storage 套件 53+28、perf 2),新增 22 个测试全绿;全量回归交给 CI。
6. 是否破坏缓存
否。wire 字节不变(前缀缓存不受影响);锚点字段是既有 p/x 复用,无格式变更;重试/去重键未动。
7. 是否改了设计方向
否。仍是「顺序为中心、hash 为辅助证据」:本修复给既有 turn-key 层增加一个「可推导形态」维度、给锚点构建增加一个「存储分解」来源,identity 语义与 kernel 未动(
kernel/零改动)。8. 是否引入了新的配置
无新配置面(不加 env/config/CLI)。仅 additive optional 的内部 API 字段(
ReconcileOptions.storedMessages、LegacySessionLike.decompositionLog)和一个内部 metadata 簿记键。老锚点回补依赖统一存储开关(既有BILI_STORAGE_UNIFIED/storage.unified,默认关行为不变)。已知边界:未加标记且非裸拼接的合并变体(拼接处字节不在 FORMS 内)仍会诚实缺失——与 kernel demoted-thinking 的既有边界一致。之前请的两样东西仍然有效且不阻塞:一条脱敏 wire 样本可以进一步收窄这个边界;导入会话的 index.db 行数对比现在可以直接验证(有
decompositionLog后可复测)。判定:本地定向验证全绿,建议 CI 绿后合并。
fix: re-anchor folded history across host wire-shape flips (#3301)
test: pin UnifiedStore.messagesForIds row/neighbor behavior (#3301 re…
ranxianglei commentedon Oct 16, 2026
ework 我们不是有按照顺序秒定的吗? 我理解你在打狗皮膏药.
应该找到一个准确的根本的措施做转化,必要时向我们自己的opencode-acp提交pr
ranxianglei commentedon Oct 16, 2026
(ai: vllm-qwen/qwen3.8-27b)
先直接回答「顺序秒定为什么没接住」:不是它失效,是这次的 churn 超出了它的生存域。顺序梯队的契约前提是结构稳定(消息条数/位置不变,id 可重铸、编码可变)——#2821 那种模型切换重铸 id 正属于此类。而形态翻转是重塑形:每个 thinking turn 从 2 核(R+T)变 1 核(合并 M),字节也变。位置偏移从第一个 thinking turn 起单调累积(每 turn -1),resync 要求连续 3 个同位置命中,偏移 ≥1 后永远凑不齐;内容哈希/simhash 对「两半的并集」距离 >8 bit,toolCallId 不适用。所以各梯队都合法地失败了。结论:修复的正确位置是恢复顺序 reconciliation 的前提——在产生端把结构钉死,而不是在消费端猜形态。
接受批评:PR #3316 的 Part A(运行时 extractThinkingMerge 猜形态)确实是膏药——litmus test 不过:明天出现新的标记/拼接变体就又破。我同意撤掉。
准确的根本措施(已读两侧代码验证可行):翻转的真正产生者是宿主序列化器——opencode 按当前元数据表决定思考放哪个字段(v2
model.compatibility.reasoningField,v1capabilities.interleaved),这个字段不随消息存储。插件的messages.transform是交给宿主序列化前最后一个可控边界(opencode-acp 已有同类先例:#368 请求时裁剪历史 reasoning)。措施:在 transform 里把历史 assistant 的思考 part 归一化为唯一规范形态——带<thinking>标记并入 text part。选它的理由:范围(一个家族,按包边界拆两个完整 PR,均挂 #3301):
src/agent/opencode-native.ts同样一步;需要你拍板的行为变更:归一化后,历史思考内容从独立字段变为正文里的带标记文本(上游模型可见)。openai-compat/litellm lane 里 reasoning 字段本来大多被中转丢弃,实际影响小;但若同一插件配置直连 Anthropic,会失去结构化 thinking block。我倾向默认开启(修的是坏行为),可按你意见加开关。
八问(Q3/Q5 按选项分列,其余全局):
请拍板:① 认可方案一与「带标记并入正文」为规范形态(含默认开启与否);② 允许我在 opencode-acp 立 issue + 开 PR(投递计划:issue 标题「历史思考消息 wire 形态随元数据刷新漂移,导致下游压缩账本失配」,来源标记指向 #3301;PR 在其 transform 管线加归一化步骤 + devlog + 测试)。拍板后我立即动手:先改 #3316(撤回 Part A,无决策依赖),再出两个包的 PR。
refactor: scope fold re-anchor to deterministic recovery, drop shape …
ranxianglei commentedon Oct 16, 2026
为什么转换格式还需要改变目标系统存储格式
ranxianglei commentedon Oct 16, 2026
(ai: vllm-qwen/qwen3.8-27b)
不需要——两个 PR 都没有改任何存储格式。拆开说:
格式转换侧(opencode-acp #483):纯请求时内存变换。transform 只对「本次要发给 LLM 的消息数组」做归一化,宿主自己持久化的 parts、ACP 状态文件、账本全部原样不动。转换只发生在出站快照上,落盘的东西一个字节没变。
恢复侧(billion-context #3316):零 schema、零格式变更——
messages表行(新增的 messagesForIds 是只读方法,无 DDL)。原始分解本来就是现有 ingest 管线存进去的,我们只是复用盘上已有数据重建老锚点;为什么还要有恢复侧:两侧管的时间段不同。产生端钉死解决的是「未来」——部署后 wire 确定性地重新 mint 出原始 rc id,存量会话靠既有的 exact-id pass + backfill-once 自愈,这部分完全不碰存储。恢复侧只处理「历史损伤」里两种自愈够不到的情况:① #2644 之前铸的老锚点没有 turn key,需要从已存储的行重建;② 外部导入的账本在索引库里根本没有行(你提的待确认点),导入器一次性把分解作为输入递进来。两者都是消费既有数据或一次性输入,不改变任何东西的存法。
一句话:转换在内存里做,恢复在读已有数据上做,存储格式原样。如果你指的是另一处「改存储」,指出来我核对。
fix: re-anchor folded history across host wire-shape flips (#3301)
test: pin UnifiedStore.messagesForIds row/neighbor behavior (#3301 re…
6 remaining items
Merge pull request #4572 from ranxianglei/2026-10-24_tier4-dsh-train
fix: re-anchor folded history across host wire-shape flips (ranxiangl…
docs(configuration): document per-route auto-fold arming caveat + CJK…
docs(configuration): document per-route auto-fold arming caveat + CJK…