Skip to content

test: validate realistic and default-scale dataset queries (#223) - #229

Merged
codeasier merged 14 commits into
mainfrom
fix/223-realistic-scale-acceptance
Oct 10, 2026
Merged

codeasier merged 14 commits into
mainfrom
fix/223-realistic-scale-acceptance

Conversation

@codeasier

@codeasier codeasier commented Oct 10, 2026 •

Copy link
Copy Markdown
Owner

范围

Closes #223

基于已合入 #226/#227/#228 的最新 main,补足真实生命周期窗口、默认规模及安装包端到端验收。通过追加双父 merge 对齐 main,没有 force-push;保留 cache owner 校验、取消/验证语义、pinned report、SQL 剪裁、attachment fallback 和 int64 绑定域错误处理。

  • 修正 synthetic 分片夹具:仅包含窗口内分配及进入窗口时仍存活的 block,不再把所有 block 复制到每个分片。
  • 8 个固定种子 × 20 种查询形状,与 standalone 做严格差分;覆盖地址复用、跨片 pending free、static/preexisting、缺失/空文本栈、排序分页及 top_n。
  • 默认规模:1,000,000 事件、2 × 500,000 成员,实际默认 100000 行 / 64 MiB 预算下运行聚合与小页面,并验证真实行数/字节超限拒绝。
  • 非 editable 安装 wheel,可信测试生成 500002 个事件,经过真实 importer/exporter(不覆盖默认容量)得到 500000 + 2 两片,再验证 CLI/API、跨边界释放、leak、peak report 及只读哈希。
  • Dataset 百分比/GiB 使用和 standalone 相同的 SQLite 完整标量表达式,严格覆盖半值/近半值/大整数,无浮点容差放宽。标量连接和游标显式关闭,保持取消预算;超 int64 的分组总量/分母统一为 QueryExecutionError,CLI 返回 QUERY_FAILED,不泄漏原生 OverflowError。
  • 同步中英文验收说明。

最终验证

最终源码 tree:db12ad57576e4d9d0c2f04a15d013ce704e48f27。

  • 本地 Python 3.12 完整套件:2105 passed、1 skipped,635.86s;跳过的安装包用例已单独执行通过。
  • Branch-enabled coverage:92.75%(门槛 90%);关键文件独立门槛全部满足:import backend 92%、simulated allocator 90%、snapshot mutator 85%。
  • 安装 wheel 默认容量 producer→export→CLI/API:1 passed,42.38s。使用真实默认容量输出 500000 + 2 两片,无容量或预算覆盖。
  • 同一安装 wheel 扩展严格差分:200 seeds × 20 query shapes,4000/4000 exact 一致,98.34s。
  • Ruff、Black、git diff --check、fixture/snapshot provenance、sdist/wheel build、wheel audit、clean-wheel Agent acceptance 全部通过;basedpyright 0 errors(1550 informational warnings)。
  • Clean-wheel 使用原始验收脚本与不含产品包的依赖目录适配;原有安装来源与环境清理断言均保持不变。
  • 独立复核通过最终 tree;包括 264 + 145 项既有语义回归、28 项最终 realistic 回归。
  • 本地 wheel SHA256:bcaa77cdf95acb69185e239c340fd640e0f6f72bb05bcc4d41e8c6e4598a2045。精确远端 head 1c4198d 的 Python 3.10–3.13 完整 CI 已通过:https://github.com/codeasier/pt-snap-cli/actions/runs/38059769207 。已 squash 合入 main 44a26eb,合入后 push CI 单独跟踪。

独立复核发现并修复了超 int64 标量绑定泄漏;以上完整测试、覆盖率与安装包结果均来自修复后的最终 tree,构建完成后才冻结元数据并收集全套测试。

边界

没有新增 committed pickle/binary fixture,没有真实模型调用、真实会话或实际用户数据。未修改 snapshot 源码,无需追加 snapshot provenance。

这是第一方 replay/export/query 链路的离线验收,不是 live PyTorch/NPU capture、上游 msinsight producer 或 GUI 验收;依赖复用已有解释器环境,不宣称完成全新依赖解析兼容性测试。默认完整验证成本、显式 immutable 缓存约束、大 offset/高基数/无限输出预算及超过 ATTACH 上限的回退仍适用。#218、#219 保留,不扩展其设计。

Copy link
Copy Markdown
Owner Author

最终远端验证:当前提交 b05cb2ef22fd6fd23f7c529426a93949270ed0d5 的完整 Test 工作流 已成功,包含 Python 3.10–3.13、覆盖率门槛、lint/format/type、provenance 以及配置的 wheel 构建/审计/安装验收。#224–#228 的对应提交也均已通过完整 CI。所有 PR 保持草稿,没有执行合并或部署。

Copy link
Copy Markdown
Owner Author

为避免最终集成分支保留已修正问题,已将 #225、#227、#228 的本轮检视修正合入本分支,提交 6e15a773cbf239c0a30fcb8f0c36c1cee31dc2fc,源码 tree 06a96cefd7f647e8a94a2b7167df81c915c0fb43。额外父提交保留新的 #227 与 #228 依赖关系,并通过 #225 纳入已核对为等价源码的 #224 squash 祖先。

最终云端验证:完整套件 2103 passed / 1 skipped;该安装后默认规模用例另行执行通过。相关测试 296 项、独立复核 80 项通过,lint/format/type(0 errors)、wheel+sdist 构建、wheel 审计及安装验收均通过。没有引入新协议迁移、临时合并数据库或放宽预算。新提交远端 CI 正在核验,尚不以旧提交结果代替。

Copy link
Copy Markdown
Owner Author

本轮检视修正的最新提交 6e15a773cbf239c0a30fcb8f0c36c1cee31dc2fc 已通过完整 CI。验证覆盖新 head,不使用旧提交结果替代。PR 仍为草稿,未执行合并。

Copy link
Copy Markdown
Owner Author

已追加 ancestry-only 提交 bf8fc30,整合最新 main c11a3ab。源码树仍为06a96cefd7f647e8a94a2b7167df81c915c0fb43,对 main 的净改动为14文件,无删除,原 #225–#228 产品实现保留。

最终独立复核发现 SQLite 舍入参数绑定的极端聚合溢出路径仍会泄漏 OverflowError,正在补域异常归一化及回归。该问题修复与最终完整测试、安装 wheel 的规模验收完成前不合入;当前提交 CI 不代表最终待修复版本已通过。

Copy link
Copy Markdown
Owner Author

已追加 1c4198d:将 SQLite scalar 舍入绑定超出 int64 的 OverflowError 归一化为 QueryExecutionError,覆盖分组GiB总量和百分比分母两类溢出,并补充 API/CLI JSON 回归。独立复核最终 realistic/rounding 28项通过;此前保留区域264+145项独立检查通过。

最终树 db12ad57576e4d9d0c2f04a15d013ce704e48f27 已冻结。最终全套覆盖率、安装 wheel 默认规模验收及当前 head CI 正在运行,尚不宣称全部通过。

Copy link
Copy Markdown
Owner Author

最终源码树 db12ad57576e4d9d0c2f04a15d013ce704e48f27 的本地验收已全部完成:

  • 全套 2105 passed / 1 skipped;该 skipped 的 installed default-scale 用例已单独执行并通过,不是未验证。
  • 分支覆盖率92.75%,关键文件92%/90%/85%门槛均通过。
  • 非 editable 安装 wheel:500002 事件真实 importer/exporter → 默认500000+2分片 → CLI/API/report/跨边界释放/只读哈希验收通过。
  • 同一已安装 wheel:200 seeds × 20 query shapes = 4000/4000 严格差分一致,无放宽容差。
  • build、wheel audit、clean-wheel acceptance、provenance、Ruff/Black/type 全部通过。

源码冻结后未改变。最终远端 head 1c4198d 的 CI 单独核验,成功后合入;不将第一方导出验收等同于外部上游 GUI 验收,也不关闭 #218/#219 的剩余范围。

@codeasier
codeasier marked this pull request as ready for review October 10, 2026 14:40
@codeasier
codeasier merged commit 44a26eb into main Oct 10, 2026
6 checks passed

Copy link
Copy Markdown
Owner Author

合入后精确 main SHA 44a26eb 的 push CI 已最终成功(attempt3全部6 jobs):https://github.com/codeasier/pt-snap-cli/actions/runs/38060554153 。首轮因PR正文编辑触发同并发组的新run而取消,未冒充通过;已恢复取消的jobs并确认最终全部成功。远端main tree精确匹配db12ad57576e4d9d0c2f04a15d013ce704e48f27。#223已关闭,本项合入验收完成。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

[测试] 分片夹具布局不真实,缺少属性测试和超预算规模测试

1 participant