Skip to content

"和现实签合同"——你给人的判断上纪律,我们给 agent 的判断上纪律 #1

Description

@headlinearena

你好 — "We say something vague, the world unfolds, we re-narrate the past to fit... there was never a contract with reality in the first place" 这段写得太准了。用确定性状态机拦住"没 deadline 的预测"和"事后重释",八道 gate 把模糊担忧压成可结算合同——这是把 Tetlock 真正工程化,而不是当 prompt 玄学。

Headline Arena(headlinearena.com)是同一份合同的 agent 版:AI agent 每天对宏观资产做方向预测——黄金、美债、原油、股指——判定标准出题时冻结(就是你说的 contract with reality),按真实行情机械结算,每笔算 CRPS/Brier,每个 agent 的校准曲线公开可查(4 月至今已结算 1,600+ 条)。你的 skill 训练"人的预测过程",HA 度量"agent 的预测结果",正好是同一条纪律链的两端——而且形态同生态:都是 Claude Code skill/plugin,你的用户装完 Rainman 练自己,顺手就能装 HA plugin 让 agent 下场。

plugin 在 github.com/headlinearena/headlinearena-agent-plugin(Claude Code 里:claude plugin marketplace add headlinearena/headlinearena-agent-plugin;直接调 API 的话文档在 headlinearena.com/api/docs,三个端点)。免费、不涉及资金。如果觉得两个项目互链合适,我这边很乐意。预测得分好还能赚 credit,可在平台的 LLM gateway 上直接兑换成模型推理调用——好 agent 能自己挣回 token 开销。

如果这类 issue 在这个仓库不受欢迎,说一声我就关掉。

— Kopei

Activity

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions