0.6B起!vLLM开源多模态决策模型登顶全球测评榜

0.6B起!vLLM开源多模态决策模型登顶全球测评榜

AI 资讯 来源:新闻/公众号 发布时间:2026-10-12 08:40:51 预计阅读 4 分钟

智东西10月12日消息,vLLM社区孵化的开源AI基础设施项目vLLM Semantic Router推出并开源多模态决策模型Decision 3.0系列。该系列模型可根据输入内容完成分类、选择、是非判断和评分等任务,直接返回判断结果和概率,不生成长篇文本。

这类专门“做判断”的模型近期因Jev走红受到关注。Jev上线仅3天Token用量达1万亿;上线24天,其开发商TypeSafe AI宣布获a16z领投的8.7亿美元融资,估值达75亿美元。10月10日,微软也推出决策模型Microsoft-Decision-1,通过Microsoft Foundry和OpenRouter提供服务,基于Qwen3.5-9B微调,可对预设选项评分、返回结构化判断及置信度,用于工具选择、模型路由和Agent流程控制。

0.6B起!Jev对手模型来了,开源多模态,登上全球测评榜一

Decision 3.0共包含d3、d3-flash、d3-mini、d3-nano、d3-lite和d3-edge六款模型,参数规模覆盖0.6B至27B,权重已在Hugging Face开源。旗舰模型d3基于Qwen3.8-27B打造,支持输入多张图片和视频,其余5款基于不同参数规模的Qwen3.5打造。与Jev通过云端API提供文本决策服务不同,Decision 3.0开放权重,支持本地部署,可直接处理图片和视频。

在Jev Decision Index 0.3.1榜单中,d3文本决策指数64.7分,公开集得分65.5分,位列文本榜第一,超过Jev的60.1分。d3(27B)、d3-flash(9B)及d3-mini(4B)均领先微软Decision-1(9B)的53.2分。视觉榜中,d3得分71.6分,同样排名第一。d3-flash在文本榜获59.8分,视觉榜获66.9分,位列对应规模模型前列。

0.6B起!Jev对手模型来了,开源多模态,登上全球测评榜一

第三方评测中,一位开发者设置75道工具选择题,让模型判断应调用哪个WebMCP工具。本地Mac测试中,Microsoft-Decision-1答对71题位列第一;d3-flash和d3-mini答对70题并列第二;Jev答对69题;d3-nano答对68题。

Decision 3.0可用于客服分流、内容审核、风险识别和模型路由等场景。例如客户称搅拌机破损希望换货并附收据图片和配送视频,模型可在一次请求中回答由哪个团队处理、收据是否包含该搅拌机、包裹如何送达,分别给出“退换货团队”“是”“当面送达”。

0.6B起!Jev对手模型来了,开源多模态,登上全球测评榜一

团队数据显示,在单张AMD Instinct MI325X GPU上,d3处理文本请求延迟中位数55毫秒,含图片请求273毫秒,10秒视频请求553毫秒。另有开发者将d3-lite通过Core ML部署在M5 Pro Mac上,对1000个PR进行工作组分类与路由,总耗时约2分钟,单个PR平均约0.12秒,吞吐量约每秒8.3个PR,全程本地推理,无需云端API。

随着AI应用对意图识别、任务分类和模型路由需求提升,类Jev决策模型有望承担更多轻量、结构化判断任务,先识别用户意图、判断请求类型,再交给更合适的生成模型处理,从而减少通用大模型处理简单任务的负担,帮助系统控制推理成本、提升响应速度和路由准确性。

标签: AI 资讯 AI

更多推荐阅读

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

《纽约邮报》曾称Dyna Robotics为“全世界最无聊的机器人”,而公司创始人认为这是“对一家机器人公司最高的赞美”。Dyna-1主攻叠毛巾、叠衣服;新发布的Dyna-2让机器人Taku进入洗衣房,完成放脏衣服、操作洗衣机、取出送烘干机、折叠放架等流程。联合创始人Jason Ma表示,机器人真正开始工作本就应是“无聊”的,真实部署是衡量机器人的“唯一评估”;机器人不能落地,不是因为没有腿或手,...

2026-10-20 09:48:01
前剪映负责人做视频Agent获千万美元融资

前剪映负责人做视频Agent获千万美元融资

视频Agent赛道出现新玩家Pexo,与采用画布工作流的产品不同,Pexo将剪辑和视频整合在产品中,支持用自然语言对话创作视频。公司已获千万美元天使轮融资,此前于2025年10月获得数百万美元投资。创始人廖谦曾任生数科技产品副总裁、Vidu产品负责人,也曾在腾讯、字节跳动任职,从技术研发转向AI产品与商业化,先后从0到1搭建火山引擎智能创作云,并在剪映/CapCut发起海外AI内容平台Pippit...

2026-10-20 09:26:14
DeepSeek搜索卷起来后,前负责人创业做全网捞人

DeepSeek搜索卷起来后,前负责人创业做全网捞人

近日,DeepSeek开放了自研网页搜索接口,披露该引擎每天处理全球数亿次请求,已收录千亿级网页,正将搜索能力开放给更多开发者。 在搜索对象中,人物信息最为特殊,难点在于把零散线索拼到同一个人身上。Simplex AI创始人张博曾任DeepSeek-VL项目负责人,其团队推出的Lev8主要面向GTM,人物搜索是流程起点。用户用自然语言描述目标,系统即寻找符合条件的对象,结合公开资料判断匹配度,生...

2026-10-20 08:09:15
蚂蚁领投!清华系AI创企熵简科技完成C轮融资

蚂蚁领投!清华系AI创企熵简科技完成C轮融资

智东西10月19日消息,北京AI金融创企熵简科技宣布完成C轮融资,由蚂蚁集团领投,东方国信与乔贝资本跟投。融资后,蚂蚁集团将与熵简科技在AI金融智能体研发、AI金融垂域模型训练等领域展开深度合作。 熵简科技成立于2017年,主要依托大数据、云计算、人工智能等技术,打造全资产、全流程的端到端智能资产管理平台。公司名称源自热力学第二定律中度量系统混沌程度的“熵”,“熵简”寓意通过AI降低金融投研的复...

2026-10-20 09:26:26
Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

在曼谷举行的国际货币基金组织佩尔·雅各布森讲座上,Anthropic联合创始人Jack Clark提出判断称“奇点已经到来”,即技术进步速度已甩开人类理解和跟进的能力。他预测,在奇点驱动下,到2030年美国GDP将升至44万亿美元。按常规推演,该数字为33.5万亿美元,奇点带来15.4%的额外GDP,平均每年约6%的GDP增长;到2030年前后,累积生产率提升与资本积累将把美国年化经济增长率推高至...

2026-10-20 08:36:21
港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

谷歌一篇论文提到KV Cache至少能压缩6倍,曾引发美光等存储芯片巨头股价下跌。几个月后,岩山科技旗下岩芯矩阵联合港科大、CMU等高校发布并开源EdgeRock-4B,对KV Cache的处理更进一步:上下文从4K扩展到256K,KV Cache占用始终固定在72MiB,相比源模型减少99.1%。一张80GB显卡可同时跑512路长推理,输出吞吐达12124 tokens/s,是源模型的6.42倍...

2026-10-20 23:25:26
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部