Skip to content

fix: reduce active-event attribution before bounded hydration - #243

Merged
codeasier merged 2 commits into
mainfrom
fix/236-active-query-capacity
Oct 11, 2026
Merged

codeasier merged 2 commits into
mainfrom
fix/236-active-query-capacity

Conversation

@codeasier

Copy link
Copy Markdown
Owner

范围

Refs #236。针对 compat v1/native v2 的 text-only、proof-owner 集合可 ATTACH 的定点 active 查询,在 SQL 完成完整 coverage、全文调用栈归约和排名,仅补齐最终详情页来源。保持未来 free 证明、字面缺失栈标签与真正 missing 区别、静态/预存分类、top_n 后且 max_rows 前的百分比分母、精确分页标记。

ordered-frame extension 或 proof-owner 超过 ATTACH 上限时保持原有正确且计费的 fallback;不宣称所有高基数或无界输出均可在默认预算成功。有限详情页的大整数 coverage 使用精确求和,避免提前 int64 溢出。

验证

基线 main ffa71df0ddf0fb5f17a904f4092898a27287d21e,审核 tree ceb4921104f104d606dd6aa20553936b2c1f81d8。

  • 定向 attribution/realistic/source reuse 90 passed;新增 active SQL 与溢出用例通过。
  • 独立审查最终 116 passed(两项 heavy gate 单独执行);额外 36 组 identity/tie 差分和 1,000 int64 求和检查通过。
  • slow suite 12 passed / 1 optional installed-wheel skip;该 skip 不计为验收通过。
  • 最终全库 non-slow+coverage 正在重跑:首轮发现旧 report 测试锁定旧全量物化失败边界,已更新成功归约及共享预算仍耗尽的合同,13 report tests 通过。最终结果会补评论,不把未完成测试称通过。
  • Ruff/Black/diff check 通过,basedpyright 0 errors(既存 warnings)。

合成规模:1,500,000 events,3×500,000 分片,200,000 同时活跃 blocks。两布局的默认预算 page=20/exact_total 与 top_n=20 均成功,与 standalone 公共字段差分一致,源文件 hash 不变。20 万无界详情输出仍硬失败。

一次环境观测:v1 page/top 3.017s/1.692s;v2 3.267s/2.049s。page 收费 84 rows/~35KB,top 45 rows/~19KB。单次数据不是一般性能保证,benchmark 和确定性规模回归随 PR 提供。

门槛

原始记录、补源和最终输出仍按真实读取计费;SQLite 扫描仍受 deadline 约束,不承诺 RSS 或全临时盘上限。保留草稿,跟踪远端完整 CI;不自动合并。

Copy link
Copy Markdown
Owner Author

最终冻结 tree ceb4921104f104d606dd6aa20553936b2c1f81d8 的本地全套验证已完成:non-slow 2321 passed / 14 skipped;slow 12 passed / 1 skipped,总计2333 passed / 15 skipped、零失败。整体 branch coverage92.94%(门槛90%),新增SQL模块100%,attribution98%。独立审核116 focused通过。15skip中包括本地浏览器环境和可选installed-wheel项,未将这些算通过;最终集成tree的精确wheel与远端required Chromium另行验证。当前PR远端CI仍待终态。

Copy link
Copy Markdown
Owner Author

检视结论:approve with nits

对照 #236 已确认的约束(先归约再有界 hydrate;保留 proof / 全局分组;对真实读取计费;不靠「不计读取」过预算)核对通过。

已核实

  • ATTACH 可覆盖时走 SQL 全量 coverage/归约,再对页 _hydrate_blocks(dataset_active_sql.py / dataset_attribution.py)。
  • ordered-frames、超 ATTACH 走 fallback,方向正确。
  • 复测:约 60k 活跃 block,基线双模板在 ~100193 行失败;本 PR 上 active_memory_callstack_at_event 5 rows / 0.75s、active_blocks_at_event page20 62 rows / 0.20s 成功。
  • 定向 pytest 125 passed;ruff / black --check OK;basedpyright 0 errors。

nits

  • dataset_attribution.py 中 hydrate 返回值未使用(仅副作用);可标 _ 或说明意图。
  • 有界页仍不承诺无界全量在默认预算下成功——与 PR 声明一致,建议在描述里再写一句,避免验收误解。

本评论不 approve/merge,仅记录检视。

Copy link
Copy Markdown
Owner Author

已处理 检视意见:追加提交 5077c4185ba5634be91b935c77d13ea6fc8f70f1(tree c2ea0dd7b00da0ad242dc73df07fc36f81277591),仅新增两行意图注释,明确 _hydrate_blocks 在此只原地补齐返回页;其返回的页级 coverage 故意不采用,保留分页前 SQL 计算的全活跃集合 coverage。AST 对比确认执行逻辑不变。

95 项 focused tests 通过,Ruff/Black/diff-check 通过;独立 diff 复核通过。两个大规模 gate 本次未重跑,原验证不冒充新提交的完整 CI,正在跟踪新 head 的 CI。

再次确认输出边界:默认预算的改进目标是有界详情页和有限聚合,不承诺无界全量成功。PR 描述已明确“不宣称所有高基数或无界输出均可在默认预算成功”,并记录“20万无界详情输出仍硬失败”;本次不取消真实输出计费、不提高默认限额。

@codeasier
codeasier marked this pull request as ready for review October 11, 2026 05:33
@codeasier
codeasier merged commit 1d1c128 into main Oct 11, 2026
7 checks passed
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant