分析一下jev模型
回复 群友 6464: 先说定位:Jev 不是一个聊天模型,而是一个"不会说话"的模型——只做判断,不生成文本。它由 TypeSafe AI 在 2026 年 9 月 15 日发布,创始人是 Diogo Almeida,ChatGPT 的联合发明人之一,在 stealth 里做了两年。他们把这类模型叫 System One Model,名字取自卡尼曼的快思考/慢思考;Jev 取自经济学家 Jevons,意思是智能成本每降一个数量级,用例会多出几个数量级。 举个具体例子最清楚。普通 LLM 是输入 prompt、一个字一个字往外蹦 token,你要结构化结果,它得把 {、"、answer 这些字符逐个生成,然后你解析、校验,还可能格式出错。Jev 是你给状态加一组选项,它一次前向把所有答案并行吐出来: 输入 { state: "天是什么颜色" choices: ["蓝","红","黄"] } 输出 { answer: "蓝" confidence: 0.98 } 关键差异三条。输出类型安全,官方说数学上不可能出现 type error,因为答案空间提前约束死了;并行采样、不做自回归,所以快,官方标称单次 70ms 到 500ms,对比前沿 LLM 端到端 3 到 329 秒;每个答案都带校准过的概率和置信度。定价是输入 $0.042/MTok、输出免费,官方原话 too cheap to meter;工作流评测里宣称比最贵最强的模型快 193.6 倍、便宜 444.6 倍。单个问题最多 255 个选项。 有意思的 demo 两个:一个是实时玩 Doom,每秒打十几次决策,一小时约 7 美元;另一个是 Wikiracing,在几百上千个链接里高频做选择,用来展示不产生幻觉文本带来的复利收益。 但分析得把质疑摆上。Sean Goedecke 那篇批评挺到位:他认为 Jev 的技术护城河比宣传的浅。因为用普通 LLM 也能做类似的事——把回复预填成 "choice": " 然后只生成一个 token,用 grammar 约束到候选集里,速度也能快 2 到 3 倍,他自己拿 Qwen2.5-1.5B 试过。所以 Jev 的价值有多少在模型本身、多少在"每个问题只生成一个 token"这个推理策略上,其实不清楚。另外它用不了 test-time compute,智商上限大概率停在非推理模型那一档;所谓"不会幻觉"也有点语义技巧,它确实不会编造文本,但完全可能选错选项——把天说成红的。 适合干什么:官方定位是"AI 版的智能 if 语句",分类、路由、打分、抽取、分支,凡是手写 if-else 太脆、上大模型又太慢太贵的地方。也可以给别的 LLM 输出做质检、打分、护栏、越狱检测。不适合当对话助手,也不适合长篇推理和写作。 放到 agent 开发里,我的判断是它是主模型旁边的判断层,不是替代品。典型用法是在 pipeline 里塞很多廉价判断点:这步要不要重试、这条工具返回可不可信、这个意图归哪类、这条回答有没有越界。这些地方用主模型又慢又贵,还得处理 JSON 解析失败,换成这种就顺。架构上就是主 Agent 负责推理生成,判断类节点下沉给快模型。 官方博客 https://typesafe.ai/blog/introducing-system-one-models-and-jev 质疑那篇 https://seangoedecke.com/jev-means-structured-output-is-interesting-again/