Skip to content

fix: bound exporter event-ID validation memory - #241

Merged
codeasier merged 2 commits into
mainfrom
fix/240-export-validation-memory
Oct 11, 2026
Merged

codeasier merged 2 commits into
mainfrom
fix/240-export-validation-memory

Conversation

@codeasier

Copy link
Copy Markdown
Owner

范围

对应 #240 的 exporter 内存子项;不关闭整个 #240。

  • 用逐片 COUNT/MIN/MAX 和 next_expected 替代设备级 Python ID 列表,逐片检出缺口、重叠和乱序。
  • 先证明单列 INTEGER PRIMARY KEY;保留整数值 PRIMARY KEY DESC / WITHOUT ROWID 的既有可接受输入,并拒绝 NULL/非整数存储。
  • 保留负数边界排除、设备隔离、action 校验、非空要求及全部输入先校验后转换。
  • 不修改 leak state、unproved 身份或错误包装。

验证

基线 main ffa71df0ddf0fb5f17a904f4092898a27287d21e;最终审核 tree dd85c9be97e8daba850c3c37d31e7831b8c6d328。

  • fixture provenance 7 passed;exporter focused 87 passed;import/replay/governance 131 passed。
  • 独立审查:94 tests passed,另核验 6 个合法主键形态与 28 个类型/极值边界;无阻塞发现。
  • Ruff、Black、git diff --check 通过;basedpyright 0 errors(仍有既存 warnings)。未将局部测试表述为全套通过,远端 CI 待运行。

隔离子进程的合成校验阶段测量(Python 3.12.14 / SQLite 3.53.1,固定 5,000 events/shard):

Events 旧 Python 峰值 bytes 新 Python 峰值 bytes
10,000 402,442 10,519
100,000 4,002,464 14,925
1,000,000 40,493,876 58,665

该指标为 tracemalloc 记录的校验阶段分配,不含夹具构建、replay 或转换,不声称整个导入常量内存。新路径保留小量随分片数量增加的元数据。百万事件子进程 peak RSS:旧 165,200 KiB、新 23,344 KiB;为单次环境观测,不作一般性能保证。

审阅注意

仅解决 #240 的 ID 校验辅助内存;其他子项继续留在原 issue。保留草稿,不自动合并。

Copy link
Copy Markdown
Owner Author

检视结论:approve

对照 #240 导出内存子项:按片 COUNT/MIN/MAX + next_expected 校验连续 ID;不改 leak / unproved / 错误包装——符合约定。PK 形态校验后再信区间,合理。

复测:87 passed;gates OK。作者峰值 40MB→59KB 未重测,逻辑可信。本评论不 approve/merge。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant