一、决策模型赛道又添新丁
2026年10月13日,vLLM Semantic Router发布Decision 3.0系列——6个变体的多模态决策模型,参数从0.6B到27B,覆盖从边缘到云端全场景。
这是决策模型范式的第四个重要发布(前三个:Liquid AI d1、Microsoft-Decision-1、Cloudflare Clef-omni)。与前三个最大的不同:Decision 3.0是开源的、本地部署友好的、覆盖6种参数规模。
二、6个变体的具体配置
| 变体 | 参数量 | 目标场景 |
|---|---|---|
| d0.6 | 0.6B | 边缘设备、IoT |
| d1 | 1B | 笔记本/手机 |
| d3 | 3B | 小型服务器 |
| d7 | 7B | 中型推理 |
| d13 | 13B | 大型推理 |
| d27 | 27B | 云端旗舰 |
6个变体意味着用户可根据具体业务需求选择最合适的规模——这是决策模型产品化的重要一步。
三、旗舰d3的关键基准
| 基准 | d3 (27B) | Jev |
|---|---|---|
| 文本决策基准 | 64.7 | 58.2(推测) |
| 视觉决策基准 | 71.6 | 63.4(推测) |
关键发现:
- d3在文本和视觉决策基准双料第一
- 击败Jev(TypeSafe决策模型)
- 支持本地部署——与决策模型云端化趋势形成对比
三、Decision 3.0的5大核心特性
1. 多模态输入支持
Decision 3.0支持文本+视觉双模态输入——与Cloudflare Clef-omni(文本+图像+音频+视频)相比,多模态覆盖范围较窄但更聚焦核心决策任务。
2. 直接判断输出
与传统LLM不同,Decision 3.0的输出直接是判断结果:
- 分类任务:返回类别标签+置信度
- 选择任务:返回多个候选项的概率分布
- 评分任务:返回0-10分
不需要额外的解析工程,应用代码直接读取。
3. 6种规模本地部署
从0.6B(IoT)到27B(云端),所有变体支持本地部署:
- 0.6B:可在嵌入式设备运行(如Raspberry Pi + 4GB RAM)
- 27B:需要A100/H100 GPU,但相比GPT-6等通用LLM小一个数量级
4. 3大真实场景
| 场景 | Decision 3.0的作用 |
|---|---|
| 客服路由 | 对话意图识别→路由到对应团队 |
| 内容审核 | 判断UGC内容是否违规、分类违规类型 |
| 风险识别 | 金融交易欺诈检测、医疗影像初筛 |
5. vLLM生态深度整合
vLLM是当前最流行的LLM推理框架之一。Decision 3.0与vLLM Semantic Router原生整合:
- 使用vLLM的推理优化技术(PagedAttention、Continuous Batching)
- 支持OpenAI API兼容接口
- 支持本地+云端混合部署
四、与决策模型三强的横向对比
| 对比 | Liquid AI d1 | Microsoft-Decision-1 | Cloudflare Clef-omni | vLLM Decision 3.0 |
|---|---|---|---|---|
| 发布时间 | 10/7 | 10/10 | 10/9 | 10/13 |
| 开源 | 是 | 否(仅API) | 是 | 是 |
| 多模态 | 文本+图像+音频 | 文本 | 文本+图像+音频+视频 | 文本+视觉 |
| 参数规模 | 0.6B+3B | 未公开 | Qwen3-Omni-30B-A3B(基座) | 0.6B-27B(6变体) |
| 输出 | 无Token | 评分 | 不输出LLM文本 | 判断结果 |
| 部署 | 边缘 | 云端 | 云端+开源 | 本地+云端 |
| 价格 | 免费(年收入1000万以下) | $0.042/M input | Clef-flash $0.038/M | 免费开源 |
关键定位差异:
- Liquid AI d1:边缘部署+零输出Token
- Microsoft-Decision-1:商业云端+高速度
- Cloudflare Clef-omni:多模态+开源权重
- vLLM Decision 3.0:多规模+本地友好+开源
五、Decision 3.0对开发者的实际价值
1. 替代传统分类器
Decision 3.0 d0.6/d1/d3可以替代大部分BERT/RoBERTa分类器,且:
- 无需微调(zero-shot)
- 支持多任务(同一模型可做分类+选择+评分)
- 可解释(返回概率分布)
2. 与RAG/Agent结合
Decision 3.0可作为RAG或Agent的“判断节点”:
- RAG系统中:判断查询是否需要检索(节省向量库调用)
- Agent中:判断下一步动作(路由到合适工具)
- 客服中:判断用户意图(路由到对应团队)
3. 与vLLM框架整合
已有vLLM部署经验的团队几乎零成本集成:
- 同一套推理优化技术
- 同一套API接口
- 同一套部署工具
六、对决策模型赛道的3个影响
1. “开源+本地”成为标准配置
Decision 3.0是继Liquid AI d1、Cloudflare Clef-omni后第三个开源的决策模型。只有Microsoft-Decision-1保持闭源+API。这反映开源正在成为决策模型的主流。
2. 多规模覆盖成为竞争点
从单一规模(如Liquid AI的3B+600M)到6个规模(0.6B-27B),决策模型开始满足不同部署需求。这是产品化的重要进展。
3. 基准竞争白热化
d3在文本64.7 + 视觉71.6击败Jev,超过此前所有决策模型。决策模型基准正在快速演化——每周都有新SOTA。
七、5个值得记住的关键事实
- 发布时间:2026-10-13
- 产品名:vLLM Semantic Router Decision 3.0系列(d0.6/d1/d3/d7/d13/d27)
- 旗舰d27:文本决策基准64.7 + 视觉决策基准71.6(双料第一)
- 核心优势:开源+多规模+本地部署+多模态
- 击败对象:TypeSafe Jev
八、5个常见疑问
Q1:Decision 3.0和Clef-omni哪个更强?
不同维度:
- Decision 3.0:本地+多规模+开源强
- Clef-omni:多模态(4种)强
- Decision 3.0适合本地化场景,Clef-omni适合多模态场景
Q2:能商用吗?
开源协议细节待查。从vLLM生态看,Apache 2.0推测——可商用。
Q3:和Liquid AI d1什么关系?
互补关系:
- Liquid AI d1:零输出Token+边缘
- Decision 3.0:多规模+本地+开源
- Decision 3.0覆盖范围更广,但Liquid AI的零输出Token设计有独特价值
Q4:27B需要什么硬件?
d27需要1-2张A100 80GB或H100。d3只需1张消费级GPU(如RTX 4090)。
Q5:如何集成到现有系统?
vLLM Semantic RouterOpenAI API兼容,几行代码即可替换现有分类/评分调用。
九、为什么这条值得收藏
Decision 3.0是决策模型”产品化”的关键一步。三个层面意义:
1. 开源+本地成为决策模型新标配
10/13-10/13 7天内,4个决策模型发布中3个是开源的。这反映企业级用户对”数据隐私+成本可控”的需求正在压倒”调用API的便利性”。
2. 多规模覆盖让决策模型适应更多场景
从0.6B到27B的6个变体,Decision 3.0覆盖从IoT到云端的全场景。这是决策模型走向”基础设施”的具体表现。
3. 决策模型4强竞赛成形
Liquid AI/Microsoft/Cloudflare/vLLM四家10天内密集发布,决策模型正式成为独立赛道。2026 Q4将看到更多玩家进入,包括开源大模型厂商(智谱、月之暗面等)。
对于企业决策模型选型:
- 需要数据隐私 → 选Decision 3.0(本地)
- 需要多模态 → 选Clef-omni(文本+图像+音频+视频)
- 需要边缘部署 → 选Liquid AI d1(零输出Token)
- 需要云端高速度 → 选Microsoft-Decision-1(35倍速度)
对于AI基础设施厂商:
- 决策模型将成为LLM的”协处理器”,而非替代
- 多模态+多规模是未来竞争点
- 开源+本地是B端客户的首选
当Decision 3.0在10/13成为第4个决策模型发布,这个赛道的成熟度已经超越学术/试验,进入商业落地阶段。
📚 信息来源
- vLLM Semantic Router官方公告:Decision 3.0系列(2026-10-13)
- AITNT 2026-10-13:vLLM Semantic Router Decision 3.0 series深度长文(独家详细)
- 中国AI News 10/13:综合AI新闻日报
- TypeSafe官方Jev公告(对比对象)
本文为编辑独立撰写的AI产品动态分析。所有数据来自AITNT和vLLM官方公告。基准分数为vLLM自评(文本64.7/视觉71.6),Jev对比数据为推测值。具体开源协议以GitHub仓库LICENSE为准。本文不构成对任何决策模型性能的最终判断。