Skip to content

fix(system2): preserve Chinese routing for code-heavy facts - #269

Open
mmhh256 wants to merge 3 commits into
Tencent-Hunyuan:mainfrom
mmhh256:fix/system2-technical-chinese
Open

mmhh256 wants to merge 3 commits into
Tencent-Hunyuan:mainfrom
mmhh256:fix/system2-technical-chinese

Conversation

@mmhh256

@mmhh256 mmhh256 commented Nov 2, 2026

Copy link
Copy Markdown
Contributor

变更

Refs #243(自动语言检测部分)。System 2 使用整批文本的中文字符占比 70% 阈值,导致 用户使用 Python 开发,运行 pytest tests/test_search_client.py --maxfail=1 被判为英文。

复用 SDK 已有的语言检测器,逐条检测非空 fact,再按事实条数多数投票。clustered / unprocessed facts 均参与;平票和空输入选英文。显式 language/config 优先级保持原有行为。新增回归测试,并验证实际 System 2 提示词选择和显式覆盖。

用户影响

技术型中文事实不再因长命令或路径稀释中文占比而选择英文提示词。混合材料按事实多数决定语言;启发式仍可能误判,模糊场景可显式设置语言。不涉及 issue 中另提的图库异常处理。

验证

  • 新增测试在原始 main@670c7c6 上复现:4 failed / 13 passed
  • 修复后语言检测、提示词选择/注册、coding 路由和 extractor override 共 236 passed
  • uv run --no-sync ruff check tests/test_system2_language_detection.py、git diff --check 通过
  • 完整 SDK CI:本地未运行全套,等待上游 CI
  • MemHub:本次没有修改;本地未运行全套
  • 受影响提示词路径使用假 LLM 验证,无真实 LLM/embedding 调用
  • 变异验证:原始检测器的 4 个失败用例在修复后通过

测试命令:

uv run --no-sync pytest tests/test_system2_language_detection.py tests/test_lang_detect.py tests/test_prompt_language_selection.py tests/test_prompt_registry.py tests/coding/test_prompt_language_routing.py tests/test_extractor_prompt_override.py -q -o log_cli=false

隐私与安全

  • 不新增屏幕、AXTree、OCR、键鼠、剪贴板或后台录音采集
  • 不包含密钥、内部地址或真实用户数据;测试使用合成内容
  • 没有新增依赖

回滚

撤销本次提交即可,无数据迁移。

AI 辅助:Codex 参与排查、实现、测试与代码审查。未声明人工审核或完整 CI 已通过。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant