菜单
积墨AI

积墨AI

一个不会写文章的模型,为何能让AI决策成本暴降400倍?

过去两年,开发者社区形成了一个默认范式:几乎所有AI需求都交给通用大模型处理。然而在实际的软件系统运行中,每天海量的请求里,大量判断根本不需要洋洋洒洒的长文输出——系统真正需要的,仅仅是精准的确定性结论:这封工单是否紧急?这个指令该分发给哪个下游模块?用户输入是否存在删库风险?就在这样的背景下,一款名为Jev的模型彻底引爆了开发者圈子。它没有任何文本生成能力,却把很多场景下的AI决策成本降低了400倍,执行速度快了约200倍。这种“反常识”的技术路线背后,究竟隐藏着怎样的设计哲学?

当代码已经知道答案

在典型的Agent执行循环里,系统每一步都需要做决策判断:选择工具、检查结果、评估风险、决定是否继续。即便最终决策只是一个词汇,传统生成式模型也要逐Token地“吐”字,你既要为输入付费,也要为等待生成买单。更棘手的是,生成完毕后还需要代码解析JSON,遇到格式报错还得重试,整个流程冗长且成本高昂。Jev的设计团队TypeSafe AI敏锐地捕捉到了这个痛点:当代码已经明确知道全部可能的答案时,逐字文本生成本身就是一种资源浪费。他们将Jev定位为“系统一(System One)模型”,专门负责极快的确定性判断,而把复杂推理和内容创作留给通用大模型处理。这种分层架构的思路,为AI工程实践开辟了一条全新的路径。

结构化输出的工程革命

Jev的本质是一个语义决策引擎。调用时只需提供两个核心要素:State(当前状态描述)和Questions(需要决策的问题)。每个问题在提交前必须固定输出类型,Jev原生支持三种基础数据类型:Choice用于从预定义列表中挑选选项并返回概率分布;Score将输入映射到低、中、高等有序等级;Noul执行布尔判断,返回0到1之间的概率值。这种设计彻底改变了人机协作模式:模型不再输出冗长的解释文本,而是直接给出结构化的决策结果和置信概率。业务代码可以据此立即执行相应逻辑,实现真正的毫秒级响应。官方实测数据显示,端到端延迟仅70到500毫秒,每百万输入Token仅需0.042美元,输出Token完全免费。

AI的成败,不在生成多少优美的文字里,不在追逐更强的通用能力里,而在每一次毫秒级精准判断的边界控制里

“行业观察”
积墨 AI 核心产品

积墨 AI 智能体开发平台

快速搭建具备商业价值的 AI 智能体,支持复杂工作流编排、50+ 主流模型接入与私有化部署。

从理论到工程的跨越

Jev已经在多个典型场景中展现出显著的工程价值。在模型路由场景中,它能够快速判断请求复杂度,将简单检索和改写任务分派给轻量级小模型,而将高难度的架构设计路由给昂贵的推理模型,实现成本与效果的精准平衡。在工具执行风控环节,Jev在Agent调用终端命令前迅速判断操作风险等级,自动暂停破坏性操作并等待人工授权,有效防止了误操作带来的系统性风险。在结果校验与监管场景,Jev在任务结束时快速验证测试用例是否通过、Agent是否陷入重复调用死循环、输出是否违背预设规则。从多年产业实践经验来看,这类边界控制节点往往占据Agent系统总调用量的60%以上,是成本最高的环节之一。Jev以极低的延迟和成本承担这部分工作,让通用大模型得以释放算力专注核心任务,形成了高效的分工协作体系。

概率分布:安全自动化的基石

仅返回单一分类标签往往不够安全。假设Jev判定一个工单属于“财务团队”,返回结果会包含完整的概率分布:billing获得52%最高票,但technical获得46%紧随其后,整体置信度仅为0.18。有了这层概率分布,开发者可以在代码中明确划线:高置信度场景自动执行低风险逻辑,中置信度场景调用更强模型复核或要求用户二次确认,低置信度场景直接转入人工审核队列。Jev采用“基于校准决策的强化学习(RLCD)”训练方法,当模型给出90%的概率判定时,其真实准确率能够高度收敛在90%左右。需要特别澄清的是,Jev的“不会幻觉”有其严格前提:它绝不会跳出给定Schema返回格式之外的内容,如果你定义了A、B、C三个选项,它绝对不会返回D。但一个符合类型定义的错误判断依然可能发生——Jev保证不会破坏代码契约,但业务判断仍有概率出错,这种区分对于工程实践至关重要。

Jev的出现标志着AI工程进入了一个新阶段:从追求通用性转向追求场景极致。它与通用大模型形成互补而非替代关系——代码掌控业务逻辑,Jev提供语义判断。这种分层架构让Agent系统的边界控制变得高效且经济,也为企业在知识管理、智能客服等复杂场景中实现更精细化的AI落地提供了新的技术选择。行业正在从“用大模型解决一切”的理想主义,走向更务实的工程思维,这才是Jev能够迅速引爆开发者圈子的根本原因。

#系统一模型#语义决策引擎#Agent工作流#RLCD训练#概率置信度#Choice类型
分享文章

相关文章推荐

试用咨询
企业微信二维码

扫码添加企业微信