Repository navigation
ci: 修掉 bge-m3 缓存的竞态(systemd 服务抢 11434 ⇒ 缓存静默不保存) - #10
Merged
Merged
Conversation
加完缓存的第一次运行就暴露了问题:PR 那次存下了(998 MB),合并后主干那次 报 "Path Validation Error: Path(s) ... do(es) not exist, hence no cache is being saved" —— $HOME/.ollama/models 不存在,而同一 job 的测试是过的(模型与服务器都在)。 根因(安装脚本输出里的硬证据): >>> Creating ollama systemd service... Created symlink /etc/systemd/system/default.target.wants/ollama.service → ... 安装脚本会创建并启用一个 systemd 服务(以 ollama 用户跑,模型在 /usr/share/ollama/.ollama/models),它与我们手起的 ollama serve 抢 11434; 而由**服务端**决定 ollama pull 把模型写到哪: · 我们的进程赢 → $HOME/.ollama/models → 缓存能存能取 · systemd 服务赢 → /usr/share/ollama/… → 缓存 path 不存在,**静默不保存** ⇒ 缓存能不能生效靠抢(PR 与主干两次结果不同,即由此而来)。 处置(三条一起做才有意义): 1. 装完 systemctl stop + disable ollama —— 把 11434 唯一交给我们的进程 2. 显式钉死 OLLAMA_MODELS="$HOME/.ollama/models",与 cache 的 path 对齐 3. 加守卫步骤:test -d "$HOME/.ollama/models" 不成立就 exit 1 —— 让"路径不对"表现为**红的 job**,而不是安静地白攒一次缓存 判据(本仓第 N 次同族):**会静默失效的东西,必须配一个能红的守卫。** 缓存存不下 ≠ job 失败 ⇒ 没守卫时只表现为"缓存永远不命中",查无可查。 核实:YAML 可解析;步骤顺序程序化校验(缓存#5 < 安装#6 < 守卫#7 < 跑测试#8); 四条关键行存在性检查通过;cache path == OLLAMA_MODELS 指向同一目录。 提交前两问 ① 本次有决策事项 ⇒ 沿用 DEC-009(已在其「五之二」补记这个竞态与处置,含硬证据) ② CHANGELOG 已写 测试:61 passed(只改 CI 配置)
heweidong-ecco
added a commit
that referenced
this pull request
Sep 21, 2026
实测(三次运行对比): PR #10(下载,miss→save) 116s 主干 push(下载,miss→save) 99s 主干 dispatch(**命中**) 97s ⇒ 缓存实际只省 ~19s(~17%)。 **推翻我原先的说法**:本 DEC 开头写「下载占大头」——**是错的**。 GitHub runner 网络很快,1.2 GB 约 20 秒下完;那 ~100 秒里主要是 Ollama 二进制安装 + pip + 测试本身(CPU 推理)。正确说法是「下载约占 1/5」。 来源分析:原判断来自**本机**体感(8 GB 内存 + 慢网络),**不能外推到 CI** —— 与 DEC-005(把当次测量当成架构事实)是同一族错误。 保留该缓存的理由(已写进 DEC-009 §五之三): · 仍是净收益;成本只有 998 MB 配额(上限远未用满) · 为正确性加的三件事(停 systemd 服务 · 钉死 OLLAMA_MODELS · 守卫)与缓存无关也该有 —— 否则模型落在哪不确定,测试跑的可能不是你以为的那份权重 判据:**收益小 ≠ 该撤销,但必须把真实收益说清楚** —— 连"省多少"都不量,就会一直拿一个夸大的理由维护一段复杂度。 提交前两问 ① 本次无新增决策事项(沿用 DEC-009,只是补记实测数据与纠正前提) ② CHANGELOG 已写 测试:61 passed
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
现象
Path Validation Error: Path(s) ... do(es) not exist, hence no cache is being saved而主干那次的测试是过的(模型与服务器都在)⇒ 模型落到了别的目录。
根因(安装脚本输出里的硬证据)
安装脚本会创建并启用一个 systemd 服务(以
ollama用户运行,模型目录/usr/share/ollama/.ollama/models)。它与我们手起的
ollama serve抢 11434,而由服务端决定ollama pull把模型写到哪:$HOME/.ollama/models/usr/share/ollama/…⇒ 缓存能不能生效靠抢 —— PR 与主干两次结果不同,正是因为这个竞态。
处置(三条一起做才有意义)
sudo systemctl stop ollama+disable—— 把 11434 唯一地交给我们的进程OLLAMA_MODELS="$HOME/.ollama/models",与 cache 的path对齐test -d "$HOME/.ollama/models"不成立就exit 1—— 让"路径不对"表现为 红的 job,而不是安静地白攒一次缓存
核实(不靠"应该没问题")
systemctl stop/disable/export OLLAMA_MODELS/ollama pullcache path与OLLAMA_MODELS指向同一目录顺带
DEC-009补了「五之二」,把这个竞态与判据写进决策记录提交前两问
① 沿用
DEC-009(已补记竞态与处置,含硬证据)② CHANGELOG 已写