What Jev is actually good at: structured decisions, not new abilities
The author argues that Jev's classification and scoring abilities exist in other large models too, and that its real value is faster, cheaper and more stable structured output, while asking how the accuracy of its probability judgments should be measured.
Jev 真有那么强么？你真的看懂 Jev 了么？ 最近全网都在讨论 Jev，我发现有些朋友可能被一些无脑营销号给带跑偏了。 首先，Jev 其实没有提供一种现在其他大语言模型完全不具备的新能力。 它现在主打的这些分类、打分、概率判断、结构化输出等功能，市面上其他的大语言模型，比如 GPT、Claude、Grok、DeepSeek、GLM，甚至豆包，其实都可以做到。 Jev 的优势，是在输出这些结构化结果的时候，可以做到更快、更便宜、更稳定。 它针对的就是这一类特定任务，直接输出结构化结果和概率，不需要像普通大语言模型一样生成一大段自然语言。 第二点，也是我觉得现在大家讨论得比较少的： 这个东西的判断能力，到底是什么水平？ 因为它再快、再省 Token，最后干的事情也还是： 我们给它输入一堆上下文，让它去判断一个事情，最后给你一个选择、一个分数，或者一个概率。 但问题来了，它吐给你一个 90% 的概率，我们凭什么认为这个 90% 就是对的？ 比如 Jev 告诉你： 这段代码有安全风险，概率 92%。 这个用户有购买意愿，概率 87%。 这个 Agent 下一步应该调用搜索工具，概率 95%。 那这些数字的到底准不准呢？怎么衡量？ 所以这里最终还是绕不开一个问题： 这个模型它的“脑子”到底怎么样？智力如何？ 目前官方给出的说法，是在 System One 这一类任务上，Jev 的能力平均比较接近 GPT-5.6 Terra 默认推理强度的水平。 因为抛开模型的判断能力，只讨论“快”和“便宜”，意义其实没那么大。 现在本地随便跑一个小参数模型，也可以做到很快，成本接近于零。 但如果如果它回答结果的准确度很低，那再快有什么用？ 所以我们讨论 Jev，不能只看价格、速度，还要看对各种任务的准确度。 如果有人无脑吹 Jev，说它强到可以解决其他大模型解决不了的问题，要不就是说了一堆牛逼的效果但其实根本没法用于生产，那这种内容基本就不用看了，八成是为了噱头自己胡编的。 我觉得 Jev 真正值得关注的，是它背后的这套思路： 专门针对 Agent Harness，做一个负责快速判断和结构化输出的专用模型。 相当于把大模型原本已经具备的一部分“快速判断能力”单独抽出来，专门优化成本、速度和稳定性，然后交给 Harness 去调用。 这才是 Jev 真正有价值的地方。