网吧里的AI大考:30个野路子Bench揭示模型真实力
在网吧的喧嚣中,一场别开生面的AI评测悄然展开。懂模帝Bench黑客松汇聚了一群脑洞大开的选手,他们边畅饮边打造出30个独特的Bench,旨在拷问大模型的真实能力。这场活动不仅产出了一份另类的模型评测报告,更暴露出主流Bench过度聚焦编程和长程任务、忽视非编程领域的盲区。现场无人问津传统编程题,创意反而集中在模拟经营(如北漂模拟器、偶像出道模拟器)、真实环境测试(如网吧渗透导致电脑全黑)和垂直领域(如医疗器械立项决策)等方向,凸显了让普通人定义模型能力的独特价值。

嵌入式底层驱动:细节见真章

仙五基于真实工作设计的嵌入式底层驱动开发Bench,要求模型编写驱动、处理寄存器与中断。结果显示,Qwen3.8-Max功能完成度最高,测试和逆向深度均拔得头筹;DeepSeek虽简单题全过,却在复杂DMA场景中遭遇“写了但未接通”的尴尬;Opus 5.0代码质量最佳,但隐藏压力场景S5表现不佳,40轮中出现5次初始化失败和15次操作失败;GPT虽跑通任务却选择静默修复,质量分仅11;SD3则因参数和错误契约不精确而败北。作者坦言,实际手册上千页,题目仅为玩具级,但已足以窥见模型在真实工程中的差距。

物理世界:无全知全能者

具身选手张振尧提供的物理理解Bench覆盖无人机巡逻、机械臂抓取、切割、布料覆盖等场景。无人机巡航中,仅Qwen完成全部航点(RMS误差0.16米),其余模型“全军覆没”;材质抓取K3表现最佳(3/3无失误);吸盘搬运GPT完胜(误差2.7-2.9厘米),DeepSeek后两轮恢复至0.5厘米;切割题Qwen、GPT、DeepSeek稳定满分;布料题则无模型稳定攻克,DeepSeek首轮75%覆盖为最高。总分Qwen居首,K3物理直觉强但交付纪律弱,Claude恢复能力突出但首轮可靠性差。结论清晰:物理场景无全知全能模型。

破壁者:德州扑克中的策略博弈
灵感源自《三体》的破壁者Bench,用德州扑克测试模型在有限条件下的最优解能力,分文本和视频两种输入。K3判断最佳,善用行为线索且不盲目跟注;Claude牌理清晰,但抽帧信息导致误判;Qwen打法保守,加入视频后胜率反降;GPT同样保守,而DeepSeek过于激进常跟错牌。这场博弈揭示了模型在策略推理上的参差。
总结:编程专精,AGI尚远
这场网吧黑客松的结论颇具启示:大模型在编程上已远超人类,但非编程场景水平参差。Qwen3.8-Max工程能力更强,在物理、嵌入式等小众场景表现突出;K3综合智力较强,尤其擅长多模态经营模拟类。然而,各模型均为“编程专精”,距离AGI、ASI仍路途遥远。这场评测不仅是一次技术较量,更提醒我们:AI的能力边界,远未触及普通人眼中的“智能”。
更多推荐阅读

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law
《纽约邮报》曾称Dyna Robotics为“全世界最无聊的机器人”,而公司创始人认为这是“对一家机器人公司最高的赞美”。Dyna-1主攻叠毛巾、叠衣服;新发布的Dyna-2让机器人Taku进入洗衣房,完成放脏衣服、操作洗衣机、取出送烘干机、折叠放架等流程。联合创始人Jason Ma表示,机器人真正开始工作本就应是“无聊”的,真实部署是衡量机器人的“唯一评估”;机器人不能落地,不是因为没有腿或手,...
2026-10-20 09:48:01
前剪映负责人做视频Agent获千万美元融资
视频Agent赛道出现新玩家Pexo,与采用画布工作流的产品不同,Pexo将剪辑和视频整合在产品中,支持用自然语言对话创作视频。公司已获千万美元天使轮融资,此前于2025年10月获得数百万美元投资。创始人廖谦曾任生数科技产品副总裁、Vidu产品负责人,也曾在腾讯、字节跳动任职,从技术研发转向AI产品与商业化,先后从0到1搭建火山引擎智能创作云,并在剪映/CapCut发起海外AI内容平台Pippit...
2026-10-20 09:26:14
DeepSeek搜索卷起来后,前负责人创业做全网捞人
近日,DeepSeek开放了自研网页搜索接口,披露该引擎每天处理全球数亿次请求,已收录千亿级网页,正将搜索能力开放给更多开发者。 在搜索对象中,人物信息最为特殊,难点在于把零散线索拼到同一个人身上。Simplex AI创始人张博曾任DeepSeek-VL项目负责人,其团队推出的Lev8主要面向GTM,人物搜索是流程起点。用户用自然语言描述目标,系统即寻找符合条件的对象,结合公开资料判断匹配度,生...
2026-10-20 08:09:15
蚂蚁领投!清华系AI创企熵简科技完成C轮融资
智东西10月19日消息,北京AI金融创企熵简科技宣布完成C轮融资,由蚂蚁集团领投,东方国信与乔贝资本跟投。融资后,蚂蚁集团将与熵简科技在AI金融智能体研发、AI金融垂域模型训练等领域展开深度合作。 熵简科技成立于2017年,主要依托大数据、云计算、人工智能等技术,打造全资产、全流程的端到端智能资产管理平台。公司名称源自热力学第二定律中度量系统混沌程度的“熵”,“熵简”寓意通过AI降低金融投研的复...
2026-10-20 09:26:26
Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元
在曼谷举行的国际货币基金组织佩尔·雅各布森讲座上,Anthropic联合创始人Jack Clark提出判断称“奇点已经到来”,即技术进步速度已甩开人类理解和跟进的能力。他预测,在奇点驱动下,到2030年美国GDP将升至44万亿美元。按常规推演,该数字为33.5万亿美元,奇点带来15.4%的额外GDP,平均每年约6%的GDP增长;到2030年前后,累积生产率提升与资本积累将把美国年化经济增长率推高至...
2026-10-20 08:36:21
港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍
谷歌一篇论文提到KV Cache至少能压缩6倍,曾引发美光等存储芯片巨头股价下跌。几个月后,岩山科技旗下岩芯矩阵联合港科大、CMU等高校发布并开源EdgeRock-4B,对KV Cache的处理更进一步:上下文从4K扩展到256K,KV Cache占用始终固定在72MiB,相比源模型减少99.1%。一张80GB显卡可同时跑512路长推理,输出吞吐达12124 tokens/s,是源模型的6.42倍...
2026-10-20 23:25:26