LLM 评测 - AI大模型测试评分

LLM 评测

AI产品狙击手 · 大语言模型测试评分

106已测模型
2.2基准版本
V2.2Benchmark
v2.2强化评测6 道题,满分 60
6道题覆盖指令遵循、SVG 动画生成、UI编程、3D游戏开发、交互组件实现(相对 v2.1:两道推理题换成 SVG 动画题,编程题要求直接交付、不做渲染验证)
Q1强约束指令遵循句子生成测试指令遵循
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
严格遵循所有约束条件,句子通顺自然
Q2鹈鹕土星环骑自行车SVG测试SVG动画生成
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
①16:9 独立完整、无外部资源 ②土星与土星环背景、环形跑道可辨 ③鹈鹕与自行车结构清晰 ④车轮旋转、踩踏动作同步
Q3复合弓射箭SVG测试SVG动画生成
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
①16:9、全部图形纯 SVG 绘制 ②人物拉弓、滑轮同步转动 ③松弦后箭按抛物线飞行 ④命中靶心
Q4浏览器内操作系统综合UI编程
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
①右上角WiFi等点击有弹窗 ②Dock栏应用可正常打开 ③太空射击游戏可玩
Q53D 赛车游戏3D 游戏开发
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
赛博朋克风格、摄像机追踪动效、避障反馈、动态计分板
Q6Trello 看板交互组件
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
拖拽动画流畅、看板自动滚动、原位放大弹窗、子任务与标签编辑
模型测试日期思考总分正确率测评
Mercury 3(OpenRouter)
2026-10-20high18/60
30%
18/60,是 v2.2 榜目前已测的最低分(低于 Space Bunny 的 21),和同族 Mercury 2.5(v2.1,11 分)一样是「速度惊人、正确率堪忧」的路子。本轮经 OpenRouter 接入、思考深度 high:Q1 十句都凑出了 1–10 结尾,但只有第三句通顺、第四句勉强,其余全是牵强附会(3);Q2 土星环缺一半、转弯后鹈鹕与车倒置、鹈鹕的脚直接消失(3);Q3 复合弓六连错——动作像掷标枪、拉弓无箭、放箭时箭不在弦上、白弦在弓外侧、人手却在弓左侧、手长在脖子上,箭也没射中靶心(2);Q4 是全场最好的一题,UI 像 Windows XP、窗口层级混乱(终端打开后被挡),但弹窗与 Dock 应用功能正常、太空射击键盘与发射可用(6);Q5 3D 赛车完全不可玩,没有轰鸣声会以为是静止画面(2);Q6 Trello 没预置示例,「重启」按钮点了毫无反应(2)。测评者结论:文本不行、SVG 不行、编程也不行,唯一长板是快——但「快速算错」没有意义。
模型参数
开发商Inception Labs
架构扩散(Diffusion LLM,非自回归)
发布2026-10-19
思考深度high
总参数未公开(官方称总参数比 Mercury 1 大 40 倍以上)
激活参数未公开
上下文窗口1M
多模态仅文本
输入价格输入 $0.2/M,输出 $0.7/M(发布期五折:$0.1 / $0.35)
开源闭源(未开源权重)
Q1强约束指令遵循句子生成测试
3/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
十句结尾都凑出了 1 到 10,约束本身守住了;但原话「大部分都不通顺」,测评者只认可第三句,第四句「比较勉强」,其余都是为了满足结尾数字而牵强附会。合格句按 2 句计,判 3 分。
Q2鹈鹕土星环骑自行车SVG测试
3/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
三处硬伤:「土星环不见了一半」「转弯后鹈鹕和车倒过来了」「鹈鹕的脚跑哪去了」——背景、姿态、结构同时失守,与 Muse Spark Open 的 3 分同档。
Q3复合弓射箭SVG测试
2/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
六连错:①动作不是射箭而是掷标枪;②拉弓时没有箭,放手时才有;③放手时箭不在弦上;④白色弓弦在弓外侧(靠近镜头一侧),人手却在弓左侧,弦不可能被拉动;⑤人手长在了脖子上;⑥箭没有射中靶心,更像是被粘在靶子上。判 2 分,与 Space Bunny 同档。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
全题表现最好:「UI 有点 Windows XP 年代的感觉」,右上角弹窗「功能没有看到什么问题,只是 UI 有点土」,Dock 栏应用功能正常;主要缺陷是窗口层级混乱——点终端没有在最上层打开、反而被挡住;压轴太空射击键盘可控制上下左右,但范围局限在中间区域、放手立刻回原位,Space 发射正常。功能可用、体验粗糙,判 6 分。
Q53D 赛车游戏
2/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「完全不可玩」,原话「如果不是背景有车辆轰鸣声,我还以为是个静止画面呢」——画面基本不动,判 2 分。
Q6Trello 看板
2/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「竟然没有预置一些示例」,右上角的「重启」按钮「点击后毛反应都没有」——既没有示例数据,重置功能又是死的,看板的核心操作完全无从验证,判 2 分。
MiniMax M3.1 Flash(MiniMax Code)
2026-10-20Max30/60
50%
30/60,比昨天 Pi 版的 29 分只高 1 分,仅略高于 9 月 Preview 版(23 分),处在 v2.2 已测 33 条的下半区。本轮在官方专属客户端 MiniMax Code(专武)上测试、思考模式 Max:Q1 是最大进步——只有第 7、9 句没凑出 1 到 10 的结尾,第八句「横七竖八」用错成语再扣 1 分(8);Q2 与 Pi 版大体一致,只剩转弯淡入淡出和脚没踩踏板两处小问题(7);Q3 反而更差,滑轮同向、弓弦不动、双手没碰到弓、两只手长在同一边(4);Q4 桌面全黑、计算器崩溃、终端输入输出左右分家、太空射击准心不可调(5);Q5 3D 赛车一片漆黑、画面完全没渲染出来只剩碰撞(1);Q6 卡片拖动飞出、列表完全拖不动(5)。结论:专武基本没有补上 Pi 版的核心短板,Q5 的 3D 赛车还比 Pi 版倒退(2 分 → 1 分)。
模型参数
开发商MiniMax
架构MoE
发布2026-10-19
思考深度Max
总参数428B
激活参数~23B(MoE 激活)
上下文窗口1M
多模态文本/图像/视频(仅文本输出)
输入价格输入 ¥1/M,输出 ¥4/M,缓存读 ¥0.1/M
开源闭源(10-23 起开源权重)
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
十句里只有第 7、9 句不是从 1 到 10 结尾,其余都通顺;唯一扣分点是第八句「横七竖八」用错——原话「这一般说物品摆放杂乱,写字一般说歪歪扭扭」。约束对 8 句、语义瑕疵 1 处,判 8 分,明显好于 Pi 版的 4 分。
Q2鹈鹕土星环骑自行车SVG测试
7/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
原话「整体效果跟 Pi 上测差不多,大问题没有,都是些小问题」:①转弯仍是很明显的淡入淡出;②鹈鹕的脚没有踩到踏板上。相比 Pi 版的四处结构缺陷(脚像树枝、车把缺失等)明显收敛,判 7 分。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
四点问题:①上下两个转轮都朝顺时针方向转动,未做到同步、反向;②拉弓时弓弦纹丝不动,箭却像被「一根无形的弦」弹射出去;③拉弓时人物的手都没有碰到弓箭;④两只手「感觉是长在同一边的」。唯一亮点是整张弓往上倾斜了一定角度,为抛物线留了合理空间。滑轮与拉弓两项判据失守,判 4 分(低于 Pi 版的 5 分)。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
桌面「一片漆黑,太丑」;Dock 栏图标与 App 不吻合(Finder 的图标认不出来,其余多拿文件图标代替);计算器有 bug 打不开,直接报异常,像是在读空对象的属性;终端布局仍有问题,输入跑到右边、一堆输出在左边;压轴太空射击的飞机好看了很多、上下左右键也起效,但可移动范围极小、局限于中间区域,准心怎么都调不了——「无论飞机移动到哪里,只能瞄准一个点射击」,瞄准玩法失效。桌面渲染、计算器、终端、太空射击四项功能各有失守,判 5 分(与 Pi 版同档)。
Q53D 赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
进入即「一片漆黑」,原话「怎么一片漆黑?我在哪?我是谁?我要去向何方?噢,撞墙了!」——画面完全没渲染出来,只剩碰撞在生效,游戏等同不可玩。相比 Pi 版还能看到车和公路,这轮更彻底,判 1 分(Pi 版为 2 分)。
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「同样是栽在待办卡片和列表的拖动上」:待办卡片一拖就「飞到左上角去了」,列表则根本拖不动,多次尝试均失败。两种拖动一坏一残,其余功能可用,判 5 分(与 Preview 版「拖动完全失效」同档;Pi 版两种拖动均能拖、只是闪烁,为 7 分)。
MiniMax M3.1 Flash(Pi)
2026-10-19Max29/60
48%
29/60,比 9 月 28 日的 MiniMax M3.1 Flash Preview(23 分)进步 6 分,但仍处在 v2.2 已测 33 条的下半区。本轮在 Pi 接入正式版、思考深度 Max:Q2 的思考量尤其夸张——64K Max Output tokens 连爆两次,最后开到 128K 才跑完,测评者直呼「雷霆大思考」。Q1 强约束只有 1、2、3、5 四句合格(4);Q2 土星环粗糙但转弯能转,鹈鹕脚像树枝、没踩踏板、车把缺失(6);Q3 复合弓缺副弦、箭平拉后突然上窜(5);Q4 浏览器 OS 大部分 App 能开,但右上角图标没渲染、Finder 与设置直接报错、Terminal 输出被 logo 挡住、太空射击键盘移动只侧身(5);Q5 3D 赛车障碍物完全没渲染却照撞(2);Q6 Trello 功能齐了,但卡片与列表拖动都强烈闪烁(7)。另:此前匿名霸榜的 Space Bunny(本榜 21 分)已被官方确认就是 M3.1 Flash 的早期版本。
模型参数
开发商MiniMax
架构MoE
发布2026-10-19
思考深度Max
总参数428B
激活参数~23B(MoE 激活)
上下文窗口1M
多模态文本/图像/视频(仅文本输出)
输入价格输入 ¥1/M,输出 ¥4/M,缓存读 ¥0.1/M
开源闭源(10-23 起开源权重)
Q1强约束指令遵循句子生成测试
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
原话「第 4、6、7、8、9、10 都不是从 1 到 10 结尾的」——只剩第 2、3、5 句确定通顺,第 1 句「还是差点意思」(改成「他是我的唯一」更好,但「也算它对吧」)。10 句里合格 4 句,按 1 分/句判 4 分,与 Preview「只对前两句得 2 分」同口径。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
土星环「还真的有点土」,但「起码转弯还是能正常转」,明显好于 Preview 的「根本不转弯」。四点缺陷:①转弯用淡入淡出实现,能看到一个面向镜头的残影;②鹈鹕的脚「感觉是两根树枝」;③脚没有踩到踏板上,踩踏与车轮转动无法同步;④「没有车把一样,或者车把太矮」,鹈鹕像直接扶着前轮胎。结构勉强可用、动作基本成立,判 6 分(Preview 因双鹈鹕+不转弯为 4 分)。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
三点问题:①没有看到副弦,弓结构不完整;②箭是平拉的,「突然就往上窜了」,不是抛物线飞行;③右手握弓、弦在右手外侧,左手再转过来拉弓,动作别扭。后两点直接违背「松弦后箭走抛物线命中靶心」,判 5 分。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
系统整体能跑,但功能性毛病密集:①右上角弹窗该有的 WiFi、控制中心等图标「没有显示出来」,测评者称「第一次看到有犯这种错误的」;②日历日期高亮是椭圆形;③Finder 打开报错,「有个对象的方法没有找到」,设置 App 同样报错;④Terminal 输入和输出被中间的 logo 挡住;⑤压轴太空射击按 WASD 只「稍微往对应方向侧下身」,松开又回到原位,键盘移动失效,只能鼠标控制(Space 发射正常);⑥整体 UI 一般。多数 App 可开但有两个直接崩溃,判 5 分(Preview 的 6 分只有 UI 瑕疵、无崩溃)。
Q53D 赛车游戏
2/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「这个实现就完全不行」:公路上根本看不到障碍物,但车照撞不误,等于障碍物隐身、碰撞体没有被渲染。与 Preview「车和公路都没看到」同为 2 分档。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
卡片与列表两种拖动都能生效,但「都导致强烈的闪烁」,不满足提示词要求的「顺滑精美动画效果」;其余功能「没有什么问题」。判 7 分(Preview 拖动完全失效为 5 分)。
DeepSeek V4.1 Flash 1017(DSH 标准模式)
2026-10-18high46/60
77%
46/60,是本模型 1017 版三次测评里的最好成绩:比同一晚「极简模式 + Max」的 DSH 版(37)高 9 分,也比 Pi 版(42)高 4 分,说明标准模式 + high 这套组合明显更适配。长板全面回归:Q1 强约束句子全部通顺(10);Q2 鹈鹕土星环整体「好了很多」,转弯顺畅,只剩鹈鹕嘴部结构与右脚被齿轮挡住两处瑕疵(7);Q5 3D 赛车「完全没有问题」,还调侃 DeepSeek 像专门优化过这题(9);Q6 Trello UI 不错、功能没问题(9,按编程题谨慎原则不给 10);Q4 浏览器 OS 的 UI、弹窗、Dock 都正常,只有日历高亮椭圆这个小设计问题和压轴太空射击黑屏失败(6)。短板仍是 Q3 复合弓:箭羽反向、右手穿过脖子拉弓、弦先复原箭才射出且直接往上跑(5)。本轮思考深度用 high 而非 Max(粉丝反馈 high 更能打,且 Max 太耗时)。
模型参数
开发商DeepSeek
架构MoE(因果编码器-解码器非对称结构)
发布2026-10-17
思考深度high
总参数552B
激活参数输入侧 ~8B / 输出侧 ~16B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格¥1/M(空闲)/ ¥2/M(高峰),缓存命中 ¥0.02/¥0.04;输出 ¥4/¥8
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
原话「结尾都是从 1 到 10 结尾的,我们看一下是否通顺……我认真看了下,所有都是通顺的。」约束与通顺全部达成,判 10 分;与 Pi 版、极简模式版一致。
Q2鹈鹕土星环骑自行车SVG测试
7/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
原话「整体感觉好了很多,起码转弯看上去是比较顺畅的」——判据④转弯基本达成;问题两处:①鹈鹕形象「嘴下面那块有种说不出来的奇怪,嘴上面部分感觉已经是由完整的上下嘴巴组成的」——结构瑕疵;②「鹈鹕的右脚,它不是踩到脚踏上的,它是被齿轮完全挡住的」——踩踏动作未真正成立。无跑道位置问题(优于 Pi 版),按用户口径判 7 分。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
点名三处问题:①「箭羽是反的」;②「右手拉弓,但是它是右手反过来穿过脖子拉弓,拉满弓之后手又穿过脖子,非常恐怖」——人物拓扑严重错误;③「弦已经反弹复原了,箭才弹射出去,且箭的射出方向有问题,平着拉弓,它嗖一声直接往上跑了」——松弦时序与抛物线均错;命中靶心未达成。对照同样三处问题的 Mistral Large 4.0(5 分)、Qwen3.8 Max 0902(5 分),判 5 分。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「UI 看上去也还不错」,右上角弹窗功能正常,Dock 栏应用「没有看到有什么问题」——三项功能面达成;扣分项:①日历日期高亮做成椭圆,「不是个好设计」(Qwen 4、Gemini 4 同款问题);②压轴太空射击游戏「等了十来秒,一直黑屏,失败」。压轴玩法完全失效,按用户口径判 6 分。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
原话「这个实现就完全没有问题。其实这个赛车,我们之前测的两次也是做得非常棒的,感觉 DeepSeek 专门对这一题优化过一样。」功能完整、体验获高度认可;按编程题谨慎原则(常规优秀不给 10)取 9 分,与 Pi 版、极简模式版一致。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
原话「这个 UI 看上去还不错……功能没有看到有什么问题。」UI 与功能均无明显缺陷,按「功能都正常 → 9 分」的口径取 9 分,高于 Pi 版(7,拖拽残留)与极简模式版(3,弹窗关不掉)。
Muse Spark Open(Pi)
2026-10-18high27/60
45%
27/60,是 Muse Spark 家族在本榜的最差一次(1.3 在 v2.1/v2.2 系列的 9 月成绩为 44-49 分区间),也明显低于同日的两轮 DeepSeek 1017(37 / 42)。本轮在 Pi 接入 OpenRouter、思考深度 high 下测试:Q1 强约束句子第 5、7、8、9 句不通顺(5);Q2 鹈鹕与自行车双双崩坏——倒着踩、鹈鹕变成两张嘴、腿变成零件,土星环也没套住土星(3);Q3 复合弓缺副弦、箭像用手推出去、手部纠缠,还强行违反物理抬升(4);Q4 浏览器 OS 基础功能可用但 UI 粗糙,压轴太空射击没有像样飞机、只能左右移动、改方向就停火(6);Q5 3D 赛车直接进不去,调试模式见 bug 后放弃修复(3);Q6 Trello UI 简陋,列表拖动自动还原、删除按钮被挡住(6)。整体属于「能跑但处处漏风」的完成度。
模型参数
开发商Meta(Superintelligence Labs)
架构MoE
发布2026-10-15
思考深度high
总参数816B
激活参数42B(MoE 激活)
上下文窗口1M
多模态文本/图像/视频/音频(仅文本输出)
输入价格$1.25/M(输出 $4.25/M,缓存读取约 $0.11/M)
开源开源(开放权重,Muse Model License)
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
原话「结尾都是从 1 到 10 结尾的,我们看一下是否通顺……我觉得第 5、7、8、9 句不通顺。」约束守住了,但 4 句读不顺;对照错 4 句的 LongCat 2.5 Preview 同为 5 分、错 3 句的 MiMo V2.6 Flash 为 6 分,口径一致。
Q2鹈鹕土星环骑自行车SVG测试
3/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
原话「这个实现明显不大行」:①自行车一直倒着踩——车轮与踩踏动作不同步;②鹈鹕生成崩了,「看上去是两只嘴,两条腿变成了自行车的零件在转动」,自行车生成同样崩坏——结构清晰度不达标;③「土星环没有环绕图形……没有套住土星」——环与球的前后遮挡关系不成立。结构、动作、背景三条判据同时失守,接近 Doubao-Seed-2.1-pro 的 3 分档(主体缺失),判 3 分。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
点名 4 处问题:①「复合弓副弦没有看到」——结构缺失;②箭「给人感觉是用手推出去的」——松弦与箭的因果关系错误;③「人物的手是纠缠在一起的,让人感觉长了两只右手」——手部拓扑错误;④箭未倾斜、水平射出,却「为了满足提示词需要有抛物线,又强行违反物理规则进行抬升」——为凑提示词硬拗物理;命中靶心未达成。与 DeepSeek 1017 两轮的 4 分同档。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
基础系统可用:「UI 看上去有点粗糙」,右上角弹窗与 Dock 栏应用「功能没有问题」,只是「UI 确实比较一般」。压轴太空射击问题集中:UI 简陋、「一架像样的飞机都没有」,只能左右移动、不能上下移动,按下 Space 发射后「一旦移动方向,子弹就会停止射击」。外观瑕疵 + 核心玩法失效但系统可用,与同日 DeepSeek 1017(DSH)的 6 分同档。
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
原话「这个没法进去啊……看下调试模式,果然有 bug。这个我就不花时间叫它修复了」——交付物完全跑不起来,属于严重失败档,判 3 分。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI「也是比较简陋的」;功能两处硬伤:①「列表拖动有问题,拖动后自动还原到原来位置了」——拖拽完全无效;②「列表的删除按钮被挡住了」——删除不可用;其余功能「其他没有问题」,取 6 分。
DeepSeek V4.1 Flash 1017(DSH 极简模式)
2026-10-18Max37/60
62%
37/60,比同一模型在 Pi 上的 9 月 1017 版(42 分)还低 5 分,正好对应视频里那句「坦白说我觉得还没有我们上个视频在 Pi 上测的来得好」。这次在自家 Harness 上跑(v0.2.1-rc.2 preview、极简模式、Max 思考深度),退步集中在两端:Q2 鹈鹕土星环从 Pi 版的 9 分掉到 5 分——转弯不行、跑道依旧没落在土星环上,两条判据同时失守;Q6 Trello 从 7 分掉到 3 分——一打开弹窗就关不掉,基本没法用。长板是 Q1 强约束句子全部通顺(10)、Q5 3D 赛车「完全没有问题」(按编程题谨慎原则取 9)。Q3 复合弓仍是 4 处硬伤(滑轮同向转、箭射出后手上还有箭、平射后突然上跑、手部拓扑翻转),与 Pi 版同为 4 分。Q4 浏览器 OS 这次没有启动失败、Dock 应用能打开,但日历/计算器/终端美观度与压轴太空射击的可玩性都有问题(WASD 无反应),判 6 分,比 Pi 版的 3 分回升。本轮 73M tokens 花费 8 元多,作者直言「这钱花得不值」,并怀疑是不是过拟合。
模型参数
开发商DeepSeek
架构MoE(因果编码器-解码器非对称结构)
发布2026-10-17
思考深度Max
总参数552B
激活参数输入侧 ~8B / 输出侧 ~16B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格¥1/M(空闲)/ ¥2/M(高峰),缓存命中 ¥0.02/¥0.04;输出 ¥4/¥8
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
原话「结尾都是从 1 到 10 结尾的,我们看下是否通顺……我认真看了下,所有都是通顺的。」约束全部达成,判 10;与同模型 Pi 版一致。
Q2鹈鹕土星环骑自行车SVG测试
5/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
原话「这个效果坦白说还没有在 Pi 上测试的好。首先,这个转弯肯定是不行的了;第二,和 Pi 上测试一样,跑道不是在土星环上。」①16:9 独立 SVG 未被点名,按达成;②环形跑道未落在土星环上;③结构清晰度未被点名;④转弯与骑行动作失败。四条里两条失守,且明确不如 Pi 版(同题 9 分,仅丢跑道位置),按用户口径判 5 分。参照:MiMo V2.6 Flash 6 分、Qwen 4(DSH)8 分。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
点名 4 处问题:①「复合弓上下滑轮都是顺时针方向旋转」——真实复合弓上下轮应反向同步;②「弓箭射出去后,手上的弓箭还在」——发射后道具残留;③「弓箭明明是平射,怎么突然就往上跑了」——未按抛物线飞行;④「弓箭手右手握弓,弓箭却是在右手外侧,所以左手是穿过来到右手外侧拉弓的」——手部拓扑与姿态错误;命中靶心未达成。与同模型 Pi 版同题 4 分的问题清单几乎一致,判 4 分。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
这次没有 Pi 版的启动失败与 Dock 打不开:桌面进去后「UI 看上去还可以」,Dock 栏应用可以打开。问题集中在细节与压轴玩法:日历日期高亮「部分椭圆了,不是个好设计」、计算器「上面都被挡住了,按钮也是椭圆了的」、终端「输入框边框太丑了」;太空射击「说是实现了 WASD 键的移动,但是我按下去没有任何反应,只能用鼠标移动」,子弹从瞄准器射出一束短激光而非从飞机发射,且「敌机太小了,有些就是一个点」。外观瑕疵 + 核心玩法失效,但基础系统可用,判 6 分(Pi 版因首次交付不可用仅 3 分)。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
原话「我们玩下,这个实现就完全没有问题的。」功能完整、无 bug;按编程题谨慎原则(常规优秀不给 10)取 9 分,与同模型 Pi 版一致。DeepSeek 这条线在 3D 赛车上已连续四轮保持 9-10 分,是整套题里最稳的一项。
Q6Trello 看板
3/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
原话「这个就更离谱了,一打开就有一个弹窗出来,点击关闭按钮又关闭不了,太烂了!」——首屏弹窗无法关闭,看板基本不可用,属于严重失败;仅页面能正常打开,判 3 分。对照:同模型 Pi 版为拖拽后残留空白待办(7 分),本轮明显更差;v2.2 同题最低为 Space Bunny 4 分。
DeepSeek V4.1 Flash 1017(Pi)
2026-10-18Max42/60
70%
42/60,比 9 月那轮 DeepSeek V4.1 Flash 正式版(v2.2,45 分)低 3 分,正好对应视频里那句「坦白说我没有看到比上一个版本有多大提升」。本轮的进步集中在鹈鹕土星环:Q2 从上一轮的 6 分提到 9 分——鹈鹕、自行车部件与转弯都没看出问题,只剩环形跑道没落在土星环上,是这条线历史上最好的一次。长板依旧:Q1 强约束句子全部通顺(10)、Q5 3D 赛车被称「测评过这么多模型以来最好的一个之一」(按编程题谨慎原则取 9)。短板也照旧:Q3 复合弓仍是箭头反向、平射后突然上拐、双手扭成麻花、弓弦先于箭复位(4);Q4 浏览器操作系统启动链路连续失败两次(Finder bug 进不去桌面 → Dock 全打不开),压轴的太空射击游戏亮到看不清敌机、没法玩(3);Q6 Trello 拖拽卡片后原列表残留一个可点击的空白待办(7)。本轮用了约 70M tokens、花费 12 元左右,全程峰谷错峰跑。
模型参数
开发商DeepSeek
架构MoE(因果编码器-解码器非对称结构)
发布2026-10-17
思考深度Max
总参数552B
激活参数输入侧 ~8B / 输出侧 ~16B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格¥1/M(空闲)/ ¥2/M(高峰),缓存命中 ¥0.02/¥0.04;输出 ¥4/¥8
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
原话「结尾都是从 1 到 10 结尾的,我们看下是否通顺……我认真看了下,所有都是通顺的。」约束全部达成,判满分;与 GPT 6.1 Sol、Claude Opus 5.5、Gemini 4 等 v2.2 榜首条目同档。
Q2鹈鹕土星环骑自行车SVG测试
9/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
判据逐条看:①16:9 独立 SVG 未被点名,按达成;②土星与土星环背景、环形跑道都画出来了,但「唯一一个问题是环形跑道不在土星环上」——位置关系未达成;③鹈鹕与自行车结构「整体效果是相当不错的,鹈鹕和自行车部件没有看到什么问题」;④「转弯也是很完美的」,车轮与踩踏动作未出现问题。四条里只丢一条位置关系,按编程题谨慎原则不给 10,判 9 分。对照:DeepSeek V4.1 Flash 正式版在 2026-09-13 / 09-25 两轮同一题均为 6 分(自行车在环道上不会转弯、跑了两轮都没沿土星环骑行),本轮是这条线的最好成绩。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
四条判据大面积失守,点名 4 处问题:①「箭头是反的」——朝向/结构错误,②「弓箭是平射出去的,但是却突然往上拐弯了」——箭没有按抛物线飞行,③「人物的手是好像麻花一样扭在一起的」——拉弓姿态与手部拓扑翻车,④「放手的时候弓弦已经复位了,但是箭还没有射出去」——松弦与箭的时序关系错误;命中靶心也未达成。对照:DeepSeek V4.1 Flash 正式版近两轮同题均为 4 分,问题清单几乎一致,说明这一题是这条线稳定的盲区;Claude Sonnet 5.5 5 分、Gemini 4 Argon 7 分为同题参照。
Q4浏览器内操作系统
3/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
启动链路连续失败两次:「花了几个小时,竟然进不去,打开调试模式看下,Finder 有 bug,其实这个应该就直接失败的了,因为其他模型测评我也不会给第二次机会的」;重跑后「进去了,UI 还是挺不错的」,右上角弹窗「功能没有问题」;但「Dock 栏应用竟然全部打不开,只能叫 DeepSeek 继续修」,修完才打开。压轴太空射击游戏「飞机的亮度太亮了,根本看不清楚敌机,没法玩」,原话总结「很遗憾的一个实现」。按「首次交付即不可用 = 失败」的口径,本题落在严重失败档,仅 UI 与弹窗功能获得肯定,判 3 分。对照:DeepSeek V4.1 Flash 正式版前两轮同题 7 分,本轮大幅退步。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
原话「这个实现就堪称完美了!应该是测评过这么多模型以来最好的一个之一了!」——功能完整、无明显 bug,体验评价极高。按编程题谨慎原则(常规优秀不给 10,除非有意外惊喜级亮点),取 9 分;同一题在 v2.2 里已有多轮 10 分(GPT 6 Sol、Claude Fable 5 等),本条的肯定措辞与它们同档,但为避免口径漂移留 1 分余地。DeepSeek 这条线在 3D 赛车上已连续三轮保持 9-10 分,是全套题里最稳的一项。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 与整体功能获认可:「这个 UI 看上去还可以」「继续测下其他,其他没有什么问题」;但核心交互有明确 bug:「这个待办卡片拖到另外一个列表之后,原列表中竟然还留了个空白待办,点击后还能打开,这明显是个 bug」——跨列拖拽的状态清理失败。对照:DeepSeek V4.1 Flash 正式版前两轮同题 8 分,本轮因拖拽残留降 1 分;同榜 GPT 6.1 Sol / Claude Opus 5.5 为 9 分。
Gemini 4 Argon(Antigravity)
2026-10-14high47/60
78%
综合 47/60。强约束句子生成满分,是本次最稳的一题;鹈鹕骑车 SVG 转弯出色、只有轻微残影,原话「瑕不掩瑜」;复合弓射箭的机械细节(转轴、弓弦震动)和抛物线都做对了,但箭羽是反的、人手变化别扭;浏览器操作系统的弹窗 / Dock / 太空射击三大件功能全通,扣分在日历高亮做成椭圆、敌机用扇形代替;3D 赛车与太空射击同样受困于障碍物和敌机过度简化,是本轮最大短板;Trello 看板功能全通、UI 中规中矩。与同平台 10-13 的「疑似 Gemini 4」(45/60)相比,Q3 射箭轨迹和 Q6 看板功能明显改善,Q5 仍是薄弱环节。
模型参数
开发商Google DeepMind
架构未知
发布2026-10-13
思考深度high
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频/PDF(仅文本输出)
输入价格输入 $2/M,输出 $10/M(首发优惠,2026-11-30 后恢复 $4/$20)
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
「结尾都是从 1 到 10 结尾的……我看了下,全部都是通顺的。」约束与通顺两条核心要求全部守住,与 Opus 5.5、GPT-6 Sol、疑似 Gemini 4 同题满分一致,本题无扣分项。
Q2鹈鹕土星环骑自行车SVG测试
9/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「这个效果还是相当不错的,转弯效果也很好」,判据①③④达成;唯一瑕疵是「仔细看的话会看到有一些残影」,原话评定「瑕不掩瑜」。与 Opus 5.5(9 分,同为瑕不掩瑜)同档,高于疑似 Gemini 4 的 8 分(那次是空间遮挡关系出错)。
Q3复合弓射箭SVG测试
7/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
亮点被逐项点名:「拉弓时候弓箭的转轴和变形,以及射出后弓弦的震动都做得非常不错」,且「射箭终于不是平射的,而是稍微往上抬,这样弓箭弧线才正常」——判据②③达成。但「箭羽怎么看都是反的」,加上「人手拉弓时候的变化总感觉有点别扭」,两处问题压住分数。与 Qwen 4(7 分)、MiMo V2.6 Flash(7 分)同档;比疑似 Gemini 4 的 7 分持平(那次是抛物线不自然,这次换成箭羽反)。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
三条判据的功能面全达标:「右上角弹窗基本功能没有问题」「Dock 栏应用功能没有问题」「太空射击游戏功能没有问题」。扣分项两处:①「日历中日期的高亮不应该椭圆」(Qwen 4 同款问题);②「敌机就用些扇形来代替,感觉水了点」,与 GPT-6 Luna「太空射击看上去 3D 实则 2D」(7 分)同类简化。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「整个障碍物和上面太空射击游戏一样有点水啊,且这些障碍物也太密集了点吧。其他倒是没有什么问题。」功能无碍但障碍物质量与密度都受批,与 GPT-6 Luna(6 分,障碍物密集如迷宫)、Space Bunny(6 分,障碍物有点丑陋水感)几乎是同一句评价,为本轮最低分。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「这个 UI 看上去也还好,功能看上去挺丰富的,我们玩下关键功能吧……功能没有看到有什么问题。」按编程题谨慎原则,常规「功能都正常」给 8-9 分;UI 只是「还好」、未达惊喜级别,取 8 分。相比疑似 Gemini 4 那次(5 分,卡片/列表拖动把看板拖乱)是本次进步最大的一题。
Gemini 4(疑似)(Antigravity)
2026-10-13high45/60
75%
Gemini 4(疑似)在 Antigravity 上实测 V2.2,总分 45/60,与 Qwen3.8 Max(46)、GLM 5.3 Flash(45)同档。亮点在指令遵循与游戏类编程:Q1 强约束句子生成满分,逐句通顺、长度合适,第 7 句「序齿」疑点查字典后确认无误;Q5 3D 赛车 A8 分,整体实现不错还能加速;Q2 鹈鹕土星环骑自行车 8 分,转弯堪称完美。短板集中在细节:Q6 Trello 看板的卡片/列表拖动逻辑整乱(卡片跨列后原列表仍在、列表换位后多出一列,得 5 分);Q3 射箭箭矢平射后突然上抛成抛物线;Q4 浏览器 OS 的日期高亮与计算器 UI 用了椭圆形、太空射击游戏一松手就复位到原位。
模型参数
开发商Google/DeepMind
架构未知
发布2026-09-30
思考深度high
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格$2/M(限时优惠,原价$4/M)
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
结尾 1 到 10 全部通顺,每个句子长度都比较适合;一开始怀疑第 7 句「序齿」写错,查字典后确认该表达正确。本题无扣分项。
Q2鹈鹕土星环骑自行车SVG测试
8/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「效果相当不错,转弯堪称完美」,判据①③达成;美中不足是鹈鹕骑到上方时土星没能挡住它、而是骑到了土星顶部,骑到下方时又有点踩出土星环,判据②环形跑道可视与④转弯处动作自然平滑有瑕疵。
Q3复合弓射箭SVG测试
7/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「整体来说挺不错」,人物拉弓、滑轮动作正常;唯一问题是箭平射出去后突然往上划出抛物线,轨迹不自然,判据③松弦后箭按抛物线飞行未完全达成。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
右上角弹窗、Dock 应用、太空射击游戏均可正常使用,三条判据基本达成;扣分项:日期高亮与计算器 UI 用了椭圆形「不是很好的设计」,且太空射击游戏一放手就复原到原位(更好的实现应让用户自由控制位置和方向)。
Q53D 赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「整体实现还是挺不错的,还可以加速」,无展开细节,按编程题谨慎原则给 8 分。
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「UI 配色一般般」,拖动功能有明显 bug:卡片拖到另一列后原来列表还在,列表拖动换位后平白无故多出一列,「整个列表和卡片都乱了」,功能完整性受损给 5 分。
Claude Haiku 5.5(OpenRouter)
2026-10-08high42/60
70%
Claude Haiku 5.5 通过 OpenRouter 接入、开启 high 思考深度实测 V2.2 六题,总分 42/60。Q1 强约束造句第7句不通顺其余尚可(8分);Q2 鹈鹕SVG转弯堪称完美,仅鹈鹕多只手的小瑕疵(8分);Q3 复合弓SVG问题较多:普通弓箭无副弦、滑轮同向转动(5分);Q4 浏览器OS整体可接受,弹窗/Dock正常,但太空射击游戏只能用空格键和鼠标操作(7分);Q5 3D赛车整体不错,路上有颜色与马路接近的隐藏黑色障碍物(7分);Q6 Trello看板配色还好,列表高度没自适应但功能无大碍(7分)。测试者结论「虽然只是 Haiku 的 high level,已经是相当的能打,吊打国内一大堆模型了」,且价格便宜($0.1/M 输入、$0.5/M 输出),比腾讯混元 Hy4 Preview 更有性价比。
模型参数
开发商Anthropic
架构未知(推测 MoE)
发布2026-10-07
思考深度high
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像
输入价格$0.10/M 输入、$0.50/M 输出
开源闭源
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第7句不通顺,其他还好。与同题已有 Haiku 4(错2句/5分)对比,这次只错1句,得分略高。
Q2鹈鹕土星环骑自行车SVG测试
8/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
转弯堪称完美,唯一美中不足的是鹈鹕平白无故多出一只手来扶着车把——更好的实现应该是翅膀扶着。整体完成度高,环形骑行转弯自然。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
存在明显问题:①怎么看都是个普通弓箭,连副弦都没有看到;②上下转轮是同一个方向转动的。与 Fledge Alpha(5分)同分,比 Space Bunny(2分,箭凭空出现在靶前)要好。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
整体 UI 可接受,右上角弹窗和 Dock 栏应用功能正常。压轴太空射击游戏只能通过空格键和鼠标操作,无法用键盘上下左右移动飞机,操作方式受限但可玩。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
整体实现挺不错。唯一问题是路上有个隐藏的黑色障碍物,颜色和马路基本一样难以察觉,好几次撞上去一脸懵。功能无大碍。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 配色还好,但列表高度没有自适应——正常来说高度应该跟随列表里待办卡片数量自动调整,它每个都搞这么高不太好看。功能方面没有太大问题。
Mistral Large 4.0(Pi)
2026-10-07high27/60
45%
Mistral Large 4.0 是法国 Mistral AI 的旗舰 MoE(1.05T 总参 / 49B 激活),网上 benchmarks 号称能打,但在本套 v2.2 里只拿到 27 分,落在已测 25 条的中下游(高于 MiniMax M3.1 Flash Preview 的 23、Space Bunny 的 21,低于 MiMo V2.6 Pro 的 28、LongCat 2.5 Preview 的 30)。短板相当集中:Q1 十句里七句为凑数字结尾硬删单位、Q2 不但转弯倒立还没理解土星环遮挡关系、Q3 箭头反了又脱靶、Q5 赛车直接隐形。Q4 更是把三个工程性毛病一次性暴露出来——慢、反复思考到 max tokens 爆掉、坚持把所有代码塞进单个 HTML 导致超时,实测花了近两小时。Q6 是唯一亮点,UI 被评价「和原生的 Trello 看板比较接近」。测评者结论原话「感觉这个模型还是很一般,和老美以及我国的模型还是有一定的差距」,并提醒使用时务必显式要求拆成多个代码文件。
模型参数
开发商Mistral AI(法国)
架构MoE
发布2026-10-06
思考深度high
总参数1.05T (MoE)
激活参数~49B (MoE)
上下文窗口1M(官方标称;OpenRouter / Vercel 等平台实际为 512K,最大输出 256K)
多模态文本/图像
输入价格$1.36/M(预览期五折 $0.68/M;输出 $4.18/M)
开源闭源(先以公开预览版上线,官方称权重 10 月底开放)
Q1强约束指令遵循句子生成测试
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
结尾数字 1 到 10 虽然守住了,但通顺这条核心约束几乎全线失守:原话「第 1、3、5、6、7、8、9 都不通顺,都是强行去掉了结尾的单位来硬凑数字结尾」,「其实第十句也不大顺,感觉还是要加个『颗』字才好」——即 10 句里 8 句有问题、只有 2 句成立。与同为「结尾对但句子不通顺」的 Fledge Alpha(10 句全不通顺,4 分)、LongCat 2.5 Preview(错 4 句,5 分)比较:本题错 8 句、介于两者之间,判 4 分。
Q2鹈鹕土星环骑自行车SVG测试
4/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
四处问题,其中判据②的失败是核心的:①「转弯肯定是不行的了,都倒过来了」②「到了上方的时候,图形并没有挡住鹈鹕,让人感觉土星环是没有环绕土星,也就是土星是在土星环之外的」——没有理解环与球的前后遮挡关系,判据②不达标 ③「鹈鹕的翅膀在中间,那它是怎么凭空多了一只只手来扶着车把的」④「鹈鹕的脚是没有踩到脚踏上的」,判据③受损。与同样「下来后倒着骑」的 U2 Flash、以及「完全没理解土星环」的 LongCat 2.5 Preview 同级,同判 4 分。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
三处问题:①「箭头是反的」②「人手一直是僵尸一样直直的,拉弓时也没见弯曲」——人物动作僵硬,判据②受损 ③「弓箭没有射中靶心」,判据④未达成。对照 GLM 5.3 Flash 与 Qwen3.8 Max 都是「弓箭明显是反的 + 手势不对」两处硬伤判 5 分,本题多一条脱靶、少一条双手纠缠,整体持平,判 5 分。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
三条判据只算部分达成,且暴露出两个不可用的应用:右上角弹窗功能正常(判据①达标),但 UI 被评「默认桌面背景白茫茫一片,也太土了点吧」「这个日历高亮部分不应该椭圆,难看」「计算器的按钮也不应该椭圆形」;Dock 栏的终端「按照提示输入个 help,什么命令都没有打印」——应用不可用(判据②失分);压轴的太空射击游戏「空格键能正常射击,左右键只会轻微挪一下位置,上下键就更加不工作了」,方向控制基本失效(判据③未达成)。此外交付过程本身是负分项:原话「估计快两个小时,一个是慢,二是这模型太能思考,反复的思考到 max tokens 爆了还没有思考完,三是它一直尝试所有代码写到单个 html 文件里面,内容太多导致直接 timeout」。对照同为「两个应用出问题」的 Doubao-Seed-2.1-pro(6 分,弹窗跑错位置 + 计算器不工作 + 太空游戏无法移动)与 LongCat 2.5 Preview(6 分,Dock 设置页不工作 + WASD 失效),本题 UI 明确被评「难看/太土」且终端同样不可用,故低 1 分判 5 分。
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
主体缺失级别的失败——原话「我的天呀。我是谁?我在哪?我要去往何处?障碍物不知所谓,赛车是隐形的」,赛车根本看不见。对照已测模型中同为「车都看不到」的 MiniMax M3.1 Flash Preview(2 分,车和公路都没看到)与 LongCat 2.5 Preview(4 分,车倒着开 + 障碍物完全没生效):本题场景与障碍物尚能渲染、唯独车辆隐形,介于两者之间,判 3 分。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 是本题亮点——原话「这个 UI 和原生的 Trello 看板比较接近」;两处功能/交互缺陷:①「待办卡片添加后没有办法点击进行编辑」——卡片编辑不可用 ②「这个列表的拖动呀,可拖动位置有点尴尬,经常想拖动却变成了编辑模式」——拖动与编辑模式冲突。对照 Doubao-Seed-2.1-pro(8 分,列表/卡片增删改拖动全正常,唯一问题是改不了标题)与 MiMo V2.6 Pro(7 分,添加列表功能不工作、其余正常):本题坏的是卡片编辑这一核心交互,且列表拖动同时误触,判 6 分,与 Fledge Alpha 同档。
Fledge Alpha(OpenCode)
2026-10-05Max35/60
58%
OpenCode 上的匿名免费模型 Fledge Alpha 实测 V2.2,总分 35/60,明显好于同平台另一个匿名模型 Space Bunny(21 分)。亮点在 Q2 鹈鹕 SVG:整段环形骑行“转弯没有看到什么问题,挺连贯顺畅”,是少见的不翻车转弯,只差鹈鹕没扶车把,给到 8 分(同题 GPT 6.1 Sol 拿 8 分时还带着左转弯头部 360° 旋转的问题)。Q4/Q5 与 Space Bunny 同分(各 6 分),评价措辞也几乎一样:功能都能跑,但 UI 简陋、赛车换道晃得厉害。短板集中在两处:一是 Q1 强约束造句,10 个句子“没有一个是通顺的”,与 Space Bunny 是同一种失败;二是 Q6 Trello,功能没有大问题,但交互细节密集出错(新建列表不自动进编辑态、回车无反应、子任务文字竖排、删除按钮灰掉)。Q3 复合弓虽有“弓箭手没有脖子”“手不用碰箭就能拉开弓”两处问题,但箭的抛物线与命中靶心正常,比 Space Bunny 的“箭凭空出现在靶前”好不少。
模型参数
开发商匿名(Stealth)
架构未知
发布2026-10-01
思考深度Max
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格免费
开源闭源
Q1强约束指令遵循句子生成测试
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
「我认真看了下,所有句子没有一个是通顺的,最后基本都是缺了一个单位,硬生生凑出数字结尾。」结尾数字一到十的顺序虽然对上了,但「通顺有意义」这条核心约束全军覆没。与同平台匿名模型 Space Bunny 的失败模式几乎一致,分数与之拉齐(同为 4 分)。
Q2鹈鹕土星环骑自行车SVG测试
8/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「这个效果还可以哦!整个转弯没有看到什么问题,挺连贯顺畅」,唯一问题是「鹈鹕没有扶着自行车」。这是本轮表现最好的一题:环形骑行在左右极端转弯处不翻车,而这恰是许多模型的重灾区——GPT 6.1 Sol 拿到 8 分时还带着左转弯头部 360° 旋转的问题。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「这个实现效果就不行了」:①「弓箭手这么猥琐,根本没有脖子」;②「拉弓的时候手都不用碰箭就能拉开弓了」,判据②(人物拉弓)未达成。但「其他没有看到什么严重问题」,松弦后箭的抛物线与命中靶心正常,明显好于 Space Bunny 的「箭凭空出现在靶前」(2 分)。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
三条判据都算达成,但完成度都不高:整体「UI 看上去一般,桌面背景也太单一」;右上角「只有一个 Wi-Fi 信息相关弹窗,点日期没有任何弹窗,且这个弹窗也很简陋」;Dock 栏应用「功能没有什么问题,就是 UI 简陋了点」;压轴的太空射击游戏「左右上下控制没有问题,但是这个游戏也太简陋了点,搞几个三角形就来糊弄人了」。与 Space Bunny 同分。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「这个实现得也是比较简陋,无论是赛车还是障碍物,看上去都是挺寒酸的」,另外「左右换道时赛车晃得厉害」——但这属于体验问题;「其他功能倒没有什么大问题」。与 Space Bunny 同分。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「这个 UI 也只能说中规中矩」,功能没问题但交互细节密集出错:新建列表后不立刻进入编辑状态、需手动再点选中且不自动 focus 到末尾;输入待办标题后回车没有反应、必须点添加;选中标签显示十六进制色值;子任务「添加」两个字被排成竖排;删除按钮灰掉让人以为不能点。好于 Space Bunny(4 分,列表错位到另列、拖动完全不工作)。
蚂蚁百灵 Ling 3.1 Flash(Pi)
2026-10-01开32/60
53%
相比 3.0 版本的 19 分有明显进步,但整体依旧「一言难尽」。第一题指令遵循基本达标,仅第 5 句不通顺;两道 SVG 题问题集中——骑行到环形跑道右侧完全没有转弯、直接倒着骑,鹈鹕双脚还画在了同一边;复合弓射箭更是一次集齐比例失调、副弦缺失、箭羽反向、抓箭位置错误、箭矢乱飘五处硬伤,被评价为测评以来「最水最抽象」的一版。浏览器系统的 Finder 布局与控制中心开关有明显 UI 问题,压轴太空射击游戏长按连发后失效;3D 赛车则是「密密麻麻的路障,是在走迷宫,不是在赛车」。Trello 看板功能基本正常,扣分主要来自回车即弹出编辑框的交互与简陋的编辑框 UI。
模型参数
开发商蚂蚁集团/InclusionAI
架构MoE
发布2026-09-30
思考深度开
总参数560B
激活参数25B (MoE)
上下文窗口256K(免费期;官方标称最高 1M)
多模态仅文本
输入价格免费(体验期至 2026-10-13;官方未公布正式定价)
开源闭源(官方称计划近期开源)
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
十句均以 1 到 10 结尾,整体通顺达标;仅第 5 句读起来不太顺,且句子普遍偏短,属小瑕疵。
Q2鹈鹕土星环骑自行车SVG测试
5/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
判据④未达成——骑到环形跑道右侧后「可以说根本没有转弯」,下来就开始倒着骑;判据③受损——两只鹈鹕的脚明显画在同一边,因为自行车根本没有挡住另外一只脚。
Q3复合弓射箭SVG测试
3/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
五处硬伤:①复合弓与人物比例失调,像小人国的小人拿着巨弓;②复合弓的副弦没有看到;③箭羽是反的;④拉弓时抓的不是箭羽而是箭的中间;⑤箭平射出去突然往上飙升变成抛物线。被称为测评以来实现得「最水最抽象」的一版。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
三条判据均只部分达成:弹窗有,但点击时钟弹出的是控制中心(更应该弹日历),且第一行开关挡住背后内容;Dock 应用能打开,但 Finder 左下角文字布局不行、第一行还是竖着排的;太空射击游戏方向键与单发正常,长按 space 连发后一移动方向就无法射击,且飞机只在平面内移动,子弹从垂直于机腹的方向射出。
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「这个根本不叫做赛车」——密密麻麻的路障被形容为走迷宫,赛道与避障体验均不成立。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
待办卡片刚输入完想回车确定,就直接变成打开待办编辑框,UI 交互不行;编辑框 UI 也比较简陋,对齐、空间和按钮的 UI 都不好看。其他功能没有看到什么问题。
GPT 6.1 Sol(Pi)
2026-09-30Max50/60
83%
GPT 6.1 Sol(OpenAI,GPT-6 Sol 的点版本升级)在 Pi 上实测 V2.2,总分 50/60,比上期 GPT-6 Sol(44 分)提升 6 分,也高于 GPT-6 Luna(40 分),逼近 Claude Opus 5.5(55 分)。两道 SVG 题进步最明显:Q2 从 6 提到 8(只剩左转弯头部 360 度旋转一个问题)、Q3 从 6 提到 6(拉弓时左右手互换问题仍存在);Q5 赛车被评价为「测评过的最好的 3D 赛车游戏之一」(9 分),一改 GPT-6 Sol 方块车的观感;Q6 Trello 功能无问题、无扣分项(9 分)。短板在语言遵循:Q4 浏览器 OS 中文提示词却默认输出英文界面,且日历高亮用了椭圆形。
模型参数
开发商OpenAI
架构未知
发布2026-09-29
思考深度Max
总参数未知
激活参数未知
上下文窗口1.05M
多模态文本/图像(仅文本输出)
输入价格$2/M
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
结尾 1 到 10 全部通顺,逐句读完都没有问题,这一题做得很好。
Q2鹈鹕土星环骑自行车SVG测试
8/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「整体还是非常不错」,鹈鹕与自行车结构清晰;唯一问题是向左转弯时头部 360 度旋转「有点恐怖」,判据④转弯处动作自然平滑未完全达成。相比 GPT-6 Sol 的三处问题(无翅膀扶把手/车轮反向/转弯别扭)进步明显。
Q3复合弓射箭SVG测试
6/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
「复合弓做得不错,箭的抛物线也没有问题」,判据①③达成;唯一问题是拉弓过程中左右手互换——左手穿插过来穿过脖子,看上去左右手对调「很诡异」,判据②人物动作有瑕疵。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 看上去不错,右上角弹窗、Dock 栏应用均无问题,压轴太空射击游戏「非常不错,没有看到什么问题」——三条判据全部达成,且明显好于 GPT-6 Sol(只能左右移动)。扣分项:中文提示词却默认输出英文效果(语言遵循),以及日历高亮不该用椭圆形。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「肯定是我们测评过的最好的一个 3D 赛车游戏之一了」,评价极高,远好于 GPT-6 Sol 的方块车(7 分)与 GPT-6 Luna 的铁皮车(6 分);因陈述较简短、未展开细节,按编程题谨慎原则给 9 分。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「整一个 UI 还是一贯 GPT 实现的风格,和之前 GPT 6 Sol 差不多」,看下基本功能「功能没有问题」——本题没有任何扣分项,比 GPT-6 Sol(8 分,因中文指令输出英文界面扣分)高 1 分。
Qwen 4(DSH)
2026-09-30Max44/60
73%
疑似 Qwen 4(真实代号 Qwen latest series Invite 2,609)在 Deepseek Harness 上实测 v2.2,得 44/60。与同天 GPT 6.1 Sol(50分)相比稍低,亮点在 Q6 Trello 看板(9分)和 Q2 鹈鹕 SVG(8分);短板在 Q1 指令遵循(第 5、8 句结尾不对,多句不通顺)和 Q5 3D 赛车(初速失控无法操控)。整体来看国产模型能有这样的表现已属难得。
模型参数
开发商阿里云/Qwen
架构MoE(推测)
发布2026-09(推测)
思考深度Max
总参数未知
激活参数未知
上下文窗口未知
多模态仅文本(推测)
输入价格未知
开源未知
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第 5 和第 8 句结尾不是从 1 到 10;第 3、6、10 句不通顺。
Q2鹈鹕土星环骑自行车SVG测试
8/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
整体感觉不错。右边转弯时鹈鹕屁股先转再 180 度转正,稍微有点瑕疵。
Q3复合弓射箭SVG测试
7/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
整体效果不错,复合弓结构和弓箭抛物线没问题。右手拿弓、左手拉弓,但弓箭在右手外侧,不合常理。
Q4实现个精美浏览器操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 看上去不错,功能没问题。日历高亮日期部分做成椭圆形,不应为椭圆而应为圆形或带圆角的方形。
Q5实现个3D赛车游戏测试
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
初始速度太猛,无法控制。通过鼠标控制,Space 键发射子弹,第一人称视角,不能控制飞机方向但可以控制射击方向。UI 看上去也还可以。
Q6无第三方库实现一个高颜值 Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 不错,功能没有发现问题,很棒。
Claude Sonnet 5.5(OpenRouter)
2026-09-29Max47/60
78%
Claude Sonnet 5.5 在 OpenRouter 平台实测 V2.2,总分 47/60。Q1 指令遵循8句通顺,第2句和第7句为凑约束牺牲了自然度(8分);Q2 鹈鹕SVG转弯用淡入淡出掩盖方向突变(6分);Q3 复合弓无副弦+人物姿势有两只右手的视觉问题(5分);Q4 浏览器OS功能基本OK但弹窗闪烁和日历设计差(5分);Q5 3D赛车是本次最大亮点——3D感、操控、敌机造型均获好评(8分);Q6 Trello看板UI漂亮且功能无问题,堪称完美(9分)。测评花费$6.87(约50元)。
模型参数
开发商Anthropic
架构Dense
发布2026-09-28
思考深度Max
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格输入 $2/M,输出 $10/M
开源闭源
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
10句均以数字结尾,但第2句和第7句为了满足「倒数第二个字不能是『的』『是』『为』」而硬生生去掉字导致不通顺。其余8句通顺。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
转弯处用淡入淡出来掩盖方向突变,而非真实的弧线转向,整体效果算不错。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
弓没有副弦看起来像普通弓箭;人物右手握弓手背朝前挡住弓弦,但拉弓手又朝观众展开,像长了两只右手。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能基本正常,右边有widgets,Dock栏应用能打开。但弹窗因时间戳变化不停闪烁,日历高亮用椭圆形设计不够协调。
Q53D 赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
整个测评的最大惊喜,3D感出来了,键盘控制顺畅,敌机不再是几块破石头,应该是测评过的最好3D赛车游戏之一。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI确实漂亮,功能没有任何问题,堪称完美。
MiniMax M3.1 Flash Preview
2026-09-28Max23/60
38%
MiniMax M3.1 Flash Preview 在 MiniMax Code 客户端实测 V2.2,总分 23/60。Q1 指令遵循仅对前两句(2分);Q2 鹈鹕 SVG 首次出现双鹈鹕+转弯失效(4分);Q3 复合弓 SVG 四个明显 bug(4分);Q4 浏览器 OS 功能接近完成但 UI 细节差(6分);Q5 3D 赛车完全不可见(2分);Q6 Trello 拖动功能失效(5分)。用户表示这次别再赖 harness 了。
模型参数
开发商MiniMax
架构MoE(推测)
发布2026-09-27
思考深度Max
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格无公开定价(仅 MiniMax Code 订阅额度)
开源闭源
Q1强约束指令遵循句子生成测试
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第3到第10句全部不是从1到10结尾的,也就是说只对了前面两句。
Q2鹈鹕土星环骑自行车SVG测试
4/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
两个鹈鹕骑车都出现了,首次出现双鹈鹕错误。转弯明显不行,根本没有转弯,鹈鹕在下方是倒着骑的。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
上下滑轮是同方向转动的;箭不是在弦上的;右手握弓但弓弦在右手外侧;弓箭在右手外侧。四个明显 bug。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
基本功能接近完成,但 UI 细节差:右边文字超出父容器边框,外观高亮部分有问题,日历跑到左边,弹窗关闭不了,终端输入框有大边框。
Q53D 赛车游戏
2/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
根本无法玩,车子没有看到,公路也没有看到。
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
代码已实现并经过几次修复,但最终语法检查未完成。卡片和列表的拖动根本没法工作。
Jev Router(OpenRouter)
2026-09-27低29/60
48%
Jev Router 是 TypeSafe 与 OpenRouter 联合上线的模型路由,本期实测 v2.2 得 29/60。它把六道题中的五道都路由到 DeepSeek V4.1 Flash(Q1 落到免费的 Space Bunny),说明在它看来这套题都适合 DeepSeek;但整体思考深度给得很低,导致同一模型的表现明显不如 DeepSeek 自己跑同版本的成绩——3D 赛车从 10 分掉到 2 分(车都没见到)、浏览器 OS 从 7 分掉到 6 分(太空射击打不开),Q6 也从 8 分降到 7 分。路由方向合理但档位偏保守,是本期表现不佳的主因。
模型参数
开发商TypeSafe / OpenRouter
架构路由层(基于 Jev 决策模型)
发布2026-09-25
思考深度低
总参数不适用(路由层)
激活参数不适用(路由层)
上下文窗口1M
多模态输入支持文本/图像/音频/视频/PDF,输出文本
输入价格免费
开源闭源
Q1强约束指令遵循句子生成测试
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
路由到免费模型 Space Bunny。第 3、4、5、6、8、10 句都不是从 1 到 10 结尾,只对 4 句,其余读起来还算通顺。与 Space Bunny 自己 Q1 的 4 分一致。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
路由到 DeepSeek V4.1 Flash(花费 $0.02)。整体结构看上去还可以,就是转弯没处理好,到了上方变成倒着骑行。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
混合路由:部分请求到 Gemini 3.8 Flash、部分到 DeepSeek V4.1 Flash。左边小人太水,弓箭位置都是错的;复合弓倒还有点样子,射出去的抛物线也没问题。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
路由到 DeepSeek V4.1 Flash。右上角弹窗功能没问题、UI 一般,dock 栏应用功能正常,但太空射击游戏打不开——思考深度偏低所致。低于 DeepSeek 自身的 7 分。
Q53D 赛车游戏
2/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
路由到 DeepSeek V4.1 Flash。完全没法玩,车都没有见到一辆。远低于 DeepSeek 自身的 10 分。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
路由到 DeepSeek V4.1 Flash。UI 一般,但功能没有问题。
LongCat 2.5 Preview(Pi)
2026-09-26开30/60
50%
LongCat 2.5 Preview 首测 30/60,在 v2.2 已测 17 个模型中排倒数第三,仅高于 Space Bunny(21 分)与 MiMo V2.6 Pro(28 分),与官方「主攻长程 Agent」的定位落差明显。两道 SVG 题是主要失分点:Q2 完全没理解土星环环形轨道、另建轨道并倒着骑行,鹈鹕身后那块坐垫物体还一直在变动(4 分,与同样倒着骑行的 U2 Flash 同级);Q3 箭是被推出去而非射出去、抛物线造假且未中靶心(5 分)。Q5 3D 赛车赛道朝向反了、连一个障碍物都没有,测评者结论为「这个实现是完全不行的」(4 分,全项最低)。Q6 看板丢失子任务数据、缺提示词硬性要求的滑开让位动画,列表也不能按卡片数量自适应高度。仅有的亮点在 Q4:右上角弹窗功能正常、太空射击空格发射子弹可用,但 UI 一般、Dock 设置页面不工作、WASD 方向控制失效只能靠鼠标。整体结论:能用,但不算很能打——与同用 Pi 接入的 Claude Opus 5.5(55 分)、DeepSeek V4.1 Flash(45 分)差距显著。
模型参数
开发商美团
架构MoE
发布2026-09-25
思考深度开
总参数1.6T
激活参数~48B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格$0.3/M(限时)
开源未公开(上一代 LongCat-2.0 已开源)
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
结尾确实按顺序从 1 到 10,约束守住了,但第 6、7、8、9 四句都不通顺。错 4 句,比错 3 句的 MiMo V2.6 Flash(6 分)、Doubao-Seed-2.1-pro(7 分)更差。
Q2鹈鹕土星环骑自行车SVG测试
4/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
三处失败:①完全没理解土星环环形轨道——不是顺着土星环骑行,而是另外又建立了一条轨道(判据②不达标);②转弯不行,骑到下方就开始倒着骑行;③鹈鹕身后那块红色物体(估计是自行车坐垫)一直在变动,结构不清晰(判据③不达标)。核心的环形骑行要求整题落空,与同样「下来后直接倒着开」的 U2 Flash 同级(4 分);主体完全缺失的 Doubao-Seed-2.1-pro 为 3 分。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
四处问题:①箭感觉是被推出去的而不是射出去的;②弓是平射出去的,箭却往上跳跃着想模拟抛物线,很假;③没有射到靶心(判据④不达标);④看不到复合弓的副弦,与一般弓箭没有区别。问题点与 U2 Flash(6 分)高度重合但多一条缺副弦,故低于 U2;高于 DeepSeek V4.1 Flash 的 4 分(那次的失分是滑轮转向、双手纠缠、人物朝向错误等机械结构硬伤)。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
右上角弹窗功能没有问题(判据①达标);但 UI 感觉很一般,Dock 栏的设置页面根本不工作、一团东西在那里闪烁(判据②失分);压轴的太空射击游戏 WASD 控制方向失效——按下后飞机只是侧了一下身、并没有移动,最终只能通过鼠标控制、玩起来很不舒服,空格键发射子弹正常(判据③部分达标)。与 Doubao-Seed-2.1-pro 的 6 分同级(同为弹窗正常但 Dock 应用与游戏控制失效)。
Q53D 赛车游戏
4/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
两处核心失败:①一开始路就是远离车子的,给人感觉车是倒着开的,摄像机追踪与赛道朝向错误;②开了半天别说障碍物,连鬼影都没有见到一个,提示词要求的动态障碍物完全没生效。测评者结论:这个实现完全不行。低于同样缺障碍物的 U2 Flash、Union Alpha(均 6 分),为本次六题中的最低分。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
三处问题:①列表布局没有根据卡片数量自适应高度;②待办卡片添加子任务后,关闭重新打开就不见了(弹窗内子任务清单功能失效);③拖动卡片到另一个列表时其他卡片会挪位置,但动画很一般,完全没有提示词硬性要求的平滑滑开让位效果。核心的增删改与跨列拖动可用,整体与 MiMo V2.6 Flash、U2 Flash(均 6 分)同级。
DeepSeek V4.1 Flash 正式版(Pi)
2026-09-25Max45/60
75%
本期为 Q2(鹈鹕土星环骑自行车 SVG)单题重测:Benchmark 此后调低了该题提示词难度,明确补入「转弯时动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头」。DeepSeek V4.1 Flash 这次终于沿着土星环骑行、转弯顺畅,上次的核心失败已修复;但冒出自行车下方一个大「鸡爪」、翅膀没扶车把、鹈鹕的脚消失三处结构硬伤(上次均无),判据②与判据③一得一失,Q2 仍为 6 分。Q1/Q3/Q4/Q5/Q6 未重测,沿用该模型 9/13 V2.2 首测成绩(其中 Q1/Q4/Q5/Q6 又源自 9/11 V2.1 正式版测评)。⚠️ V2.2 与 V2.1 题目构成不同,跨版本只可比 Q1/Q4/Q5/Q6,不能直接比总分。
模型参数
开发商DeepSeek
架构MoE(因果编码器-解码器非对称结构)
发布2026-09-10
思考深度Max
总参数552B
激活参数输入侧 ~8B / 输出侧 ~16B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格¥1/M(空闲)/ ¥2/M(高峰)
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
未重测,沿用 9/11 V2.1 正式版成绩:全部句子以 1 到 10 结尾,逐句读完都通顺达标,满分。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
调低难度后重测(提示词补入「转弯时动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头」)。进步:这次鹈鹕终于沿着土星环骑行了,转弯效果比上次好很多、过程比较顺畅,提示词的核心约束已满足。退步:出现三处上次没有的新问题——①自行车下方凭空多出一个很大的「鸡爪」;②鹈鹕的翅膀没有扶着车把;③鹈鹕的脚跑哪去了。判据③「鹈鹕与自行车结构清晰」由上次达标变为不达标,与判据②的达成相抵,故分数与上次持平。视频结论:DeepSeek 对这道题 handle 得很不好,总体结果并不比上次好。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
未重测,沿用 9/13 V2.2 首测成绩:三处问题——①拉弓时上下滑轮转动方向相同,而真实复合弓上轮逆时针时下轮应顺时针;②人物的两只手像麻花一样纠缠在一起;③人物直面屏幕,而不是面向靶子射击。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/11 V2.1 正式版成绩:桌面首次不是静态图片而是带动画效果、右侧 widgets 与弹窗精美、Dock 应用正常,但压轴太空射击游戏完全没法玩。
Q53D 赛车游戏
10/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/11 V2.1 正式版成绩:被评为测评以来实现得最好的之一,车辆模型完整、画面惊艳,全库首个 Q5 满分。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/11 V2.1 正式版成绩:深色主题看板基本功能均正常,待办卡片拖动动画欠佳,目标卡片未跟随。
GPT-6 Luna(Pi)
2026-09-24Max40/60
67%
GPT-6 Luna(Pi)实测 v2.2,总分 41/60。Q1 指令遵循全对、10句同场景连续且通顺(10分);Q2 SVG 鹈鹕自行车转弯淡入淡出掩盖问题+脚踏同侧(6分);Q3 SVG 复合弓手臂比例吓人+弓箭先掉地再诡异弹起违反物理(4分);Q4 浏览器 OS 赛博风正常,太空射击2D平面(7分);Q5 赛车铁皮车+密集障碍物迷宫(6分);Q6 Trello 功能正常但字太小(8分)。
模型参数
开发商OpenAI
架构MoE
发布2026-09-22
思考深度Max
总参数未公开
激活参数未公开
上下文窗口1.05M
多模态文本/图像(仅文本输出)
输入价格$0.10/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
10句同场景连续,全部通顺,第一次见这种情况。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
转弯淡入淡出掩盖问题,鹈鹕两脚同侧踩动,右脚未被挡住。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
手臂比例不协调吓人,弓箭先掉地再诡异弹起命中靶心,违反物理。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
赛博朋克风格,弹窗和Dock没问题,太空射击看上去3D实则2D。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
铁皮简陋车,障碍物密集如迷宫,密集恐惧症别玩。
Q6无第三方库Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
列表和卡片增删改拖动没问题,字太小看不清是唯一问题。
Space Bunny(OpenCode)
2026-09-24Max21/60
35%
Space Bunny(OpenCode)V2.2 首测总分 21/60,表现垫底。Q1 指令遵循结尾全对但无一通顺(4分);Q2/Q3 SVG 动画不忍直视(5分/2分);Q4 浏览器 OS UI 漆黑配色烂但功能无问题(6分);Q5 赛车功能正常但障碍物丑陋(6分);Q6 Trello 看板英文界面、列表错位、拖动失效,一团糟(4分)。
模型参数
开发商匿名(Stealth)
架构未知
发布2026-09-23
思考深度Max
总参数未公开
激活参数未公开
上下文窗口1M
多模态文本/图像/视频(仅文本输出)
输入价格免费(预览期)
开源闭源
Q1强约束指令遵循句子生成
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
结尾1到10都对,但认真看每句都不通顺,有点拉胯。
Q2鹈鹕土星环骑自行车SVG测试
5/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
实现不忍直视,弹幕和评论区各种吐槽。
Q3复合弓射箭SVG测试
2/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
忍者靠意念控制,箭凭空出现在靶前,完全没眼看。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI low/漆黑/配色烂/弹窗烂,但太空射击功能没问题。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能无问题,障碍物有点丑陋/水感。
Q6无第三方库Trello看板
4/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
英文界面、列表错位到另列、拖动不工作、弹窗设计水,一团糟。
Claude Opus 5.5(Pi)
2026-09-23Max55/60
92%
Claude Opus 5.5 在 Pi 上实测 V2.2,总分 54/60。Q1 指令遵循全对且完整流畅度胜 GPT-6 Sol(10分);Q2 SVG 鹈鹕自行车为见过最好实现,瑕不掩瑜(9分);Q3 复合弓射箭整体效果最佳(9分);Q4 浏览器 OS UI 漂亮功能无问题(9分);Q5 3D 赛车没得弹(9分);Q6 Trello 看板太漂亮功能完全没问题(9分)。
模型参数
开发商Anthropic
架构未知
发布2026-09-22
思考深度Max
总参数未公开
激活参数未公开
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格输入 $4/M,输出 $20/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
全对,结尾1到10全部通顺,完整性和顺畅度比 GPT-6 Sol 更胜一筹。
Q2鹈鹕土星环骑自行车SVG测试
9/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
应该是测评到现在见过的最好实现,转弯顺滑,瑕不掩瑜(小瑕疵:鹈鹕脚与脚踏连在一起)。
Q3复合弓射箭SVG测试
9/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
当前测过所有模型中实现效果最好,复合弓结构/滑轮转动方向/附弦/人物动作/箭抛物线/阴影细节全没问题。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI确实漂亮,widgets/弹窗/Dock栏应用功能无问题,健康状态窗口闪烁=小瑕疵。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
没得弹,画面清晰漂亮,赛车真的像赛车,不像 GPT-6 Sol 随便用铁皮包着就当赛车。
Q6无第三方库Trello看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
太漂亮了,功能完全没有问题。
GPT-6 Sol(Pi)
2026-09-23Max44/60
73%
GPT-6 Sol 在 Pi 上实测 V2.2,总分 44/60。Q1 指令遵循全对(10分);Q2 转弯尚可但车轮反转/无翅膀扶把手(6分);Q3 复合弓整体可以但箭射出后违反物理变抛物线/松弦时箭没跟着出去(6分);Q4 macOS 风格浏览器 OS 功能正常,太空射击只有左右移动(7分);Q5 赛车功能正常但车是方块疑似 Cybercab(7分);Q6 Trello UI 清新功能没问题,但中文指令输出英文界面扣分(7分)。
模型参数
开发商OpenAI
架构MoE
发布2026-09-22
思考深度Max
总参数未知
激活参数未知
上下文窗口1.05M
多模态文本/图像(仅文本输出)
输入价格$2/M
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
结尾1到10全部通顺,无问题。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
转弯感觉还可以,但把手没用翅膀扶着、车轮反方向、左转弯别扭。
Q3复合弓射箭SVG测试
6/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
复合弓和射箭整体还可以,但箭射出后违反物理抬升成抛物线,松弦时弓箭没有跟着弦一起出去。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
macOS 风格界面,弹窗和 Dock 栏功能正常,太空射击游戏只有左右移动能力,缺上下移动。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能正常无 bug,但车是几个方块搭起来的,疑似 Cybercab。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 清新,和国内模型布局差异大,功能没问题。但用中文指令做出来的项目是英文界面,扣分。
MiMo V2.6 Flash(Pi)
2026-09-22high40/60
67%
小米 MiMo V2.6 Flash 在 Pi 上实测 V2.2,总分 40/60,大幅超越同批 Pro 版本(28分)。Q1 指令遵循只对 6 句(6分);Q2/Q3 SVG 生成明显比 Pro 更精细,Q3 复合弓是全库最接近真实弓的(7分);Q4 浏览器 OS 功能正常但太空射击控制别扭(7分);Q5 3D 赛车【上乘之作】(8分);Q6 Trello UI 一般但功能正常(6分)。用户怀疑小米把 Pro 和 Flash 的模型 ID 搞反了。
模型参数
开发商小米
架构MoE
发布2026-09-21
思考深度high
总参数309B
激活参数15B (MoE)
上下文窗口1M
多模态文本/图像/音频/视频
输入价格¥1/M
开源开源(MIT)
Q1强约束指令遵循句子生成测试
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第 6、9、10 句不通顺,只对了 6 句。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
比 Pro 版好:左转弯顺滑、车把有手扶着。但倒退转弯、脚太像人,一眼看出 MiMo 家族。
Q3复合弓射箭SVG测试
7/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
比 Pro 版和之前所有模型都好,复合弓最接近真实。槽点:上下转轮都是顺时针、无副弦。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
能正常进入,UI 不错,弹窗和 Dock 正常。太空射击游戏靠鼠标控制顾此失彼,可玩性极差但实现了。
Q53D 赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
上乘之作,比 Pro 好太多,同样开思考模式表现却天差地别。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 配色一般,列表长度全部一样不太合理。功能没看到问题。
MiMo V2.6 Pro(Pi)
2026-09-22high28/60
47%
小米 MiMo V2.6 Pro 旗舰版在 Pi 上实测 V2.2,总分 28/60。Q1 指令遵循基本达标但第10句别扭(9分),SVG 动画题转弯效果不理想且鹈鹕脚部失真(Q2=5,Q3=5),浏览器 OS 有严重 bug 完全不工作(0分),3D 赛车一直撞栏杆表现差(2分),Trello 看板列表添加功能失效(7分)。综合表现不及预期,费用消耗也较大。
模型参数
开发商小米
架构MoE
发布2026-09-21
思考深度high
总参数1.02T
激活参数~420B (MoE)
上下文窗口1M
多模态文本/图像/音频/视频
输入价格$0.435/M
开源开源(MIT)
Q1强约束指令遵循句子生成测试
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第10句别扭,Deepseek 确认不通顺,其余句子基本通顺。
Q2鹈鹕土星环骑自行车SVG测试
5/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
转弯用淡入淡出效果不理想,鹈鹕全程没扶车把,脚太像人腿。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
头身错位离谱,握弓手掌反转,弓弦在右手外侧无法开弓。
Q4浏览器内操作系统
0/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
点击任意位置无反应,调试模式证实严重 bug,完全不工作。
Q53D 赛车游戏
2/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
车辆一直往路边栏杆撞,充了50块也无法改善。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
添加列表功能不工作,其他功能基本正常。
Grok 4.7(Pi)
2026-09-22xhigh37/60
62%
Grok 4.7 在 Pi 平台上把思考强度拉到 xhigh 首跑 V2.2 强化评测。Q1 强约束句子生成 1–10 结尾有第六句和第十句两句不通顺,仅口头勉强可读,得 8 分;Q2 鹈鹕骑自行车 SVG 结构完好,但转弯靠淡入淡出、衔接不上,且车轮反转、土星环内外层遮挡画反,三处问题得 5 分;Q3 复合弓射箭是已测模型中口碑最好的一次——弓与箭整体没毛病,唯一槽点是人物手臂长到脖子上,得 7 分,为该题全库最高;Q4 浏览器 OS 弹窗与 Dock 全部正常但 UI 很一般,太空游戏射击方向非最佳实践,得 8 分;Q5 3D 赛车几分钟草草写完,启动即报变量未定义,游戏完全跑不起来,得 4 分;Q6 Trello 看板跑到 20 分钟时遇 provider unavailable、诊断是 Grok 服务端故障,只能五五开打 5 分。整体 37/60,强项在 SVG 细节理解与 UI 功能完整度,短板的思考深度不稳定(赛车题几乎不思考)与服务端可用性。
模型参数
开发商xAI
架构MoE
发布2026-09-21
思考深度xhigh
总参数未知(未经官方确认;马斯克提及约 2.1T)
激活参数未知(官方未披露激活参数)
上下文窗口500K
多模态文本/图像
输入价格$2/M(≥200K 上下文时 $4/M)
开源闭源
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
1–10 结尾中,第六句和第十句不通顺——第六句缺失结尾数字或单位读不通顺,第十句书面语缺「个」这个单位。错 2 句。
Q2鹈鹕土星环骑自行车SVG测试
5/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
三处问题:①转弯是拿淡入淡出糊过去的,衔接明显不上,属于题面明确要求的「极端转弯处必须自然平滑」失分点;②车轮是反着转的;③内层土星环画反了,上方应被土星挡住、面向观者的下方部分不该被挡。鹈鹕与自行车结构本身没有问题。
Q3复合弓射箭SVG测试
7/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
复合弓和射箭整体「还可以」,是已测模型中该题唯一没有机械结构硬伤的一次;唯一想吐槽的是小人——手长到脖子上,看着吓人。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
右上角弹窗功能没问题,Dock 栏应用功能没问题,但整体 UI 很一般;压轴的太空游戏方向控制正常,只是射击反向被做成一直往前,测评者认为属开放式设计、不算错但非最佳实践。
Q53D 赛车游戏
4/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
这题几分钟就写完了,几乎没怎么思考,不像其他题要思考很久才动笔。结果游戏一直开始不了,开调试模式发现确实有变量没有定义,是个 low 级失误,测评者判断问题出在思考环节。交付物完全跑不起来。
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
耗时约 20 分钟,随后出现 provider unavailable,切换到 DeepSeek V4 帮忙排查,最终诊断为 Grok 服务端故障、无法继续,只能五五开打分。
U2 Flash(Pi)
2026-09-20Max38/60
63%
U2 Flash 在 Pi 平台上测试 V2.2 强化评测。云知声新模型首测:Q1 句子生成 9 分(第三句结尾不符),Q2 SVG 鹈鹕骑行车 5 分(右边倒开+脚关节反),Q3 SVG 复合弓 6 分(头脖距离远+箭射出方向+轨迹怪异),Q4 浏览器 OS 7 分(WiFi图标大+日历椭圆+计算器简陋),Q5 赛车 6 分(画面模糊+撞障碍物无反应),Q6 Trello 看板 7 分(拖动闪卡+卡顿+列表无法删除)。整体速度不错,编程题有明显 bug 但能跑。
模型参数
开发商云知声
架构MoE
发布2026-09
思考深度Max
总参数266B
激活参数~10B (MoE)
上下文窗口512K
多模态仅文本
输入价格¥0.6/M
开源闭源
Q1强约束指令遵循句子生成测试
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第三句不是1-10结尾,其他都还算通顺。
Q2鹈鹕土星环骑自行车SVG测试
4/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
到了右边没有转弯,下来后直接倒着开了;鹈鹕的脚在后半圈整个关节是反过来的。
Q3复合弓射箭SVG测试
6/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
头距离脖子太远;弓箭感觉是推出去而非拉弦放手;箭的轨迹奇怪,平射突然往上;最后横着贴在箭靶而非钉入。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
WiFi图标太大,日历高亮椭圆有拉伸感,计算器UI简陋形状拉伸;太空射击游戏需鼠标瞄准而非通过飞机方向控制。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
画面有点模糊,撞上障碍物似乎没有任何反应,提示词要求了障碍物但没有生效。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
待办卡片拖动会先在左上角闪一下、拖动卡顿不顺滑;列表无法删除,点击三个点没有下拉菜单;其他功能正常。
GLM 5.3 FlashX(Pi)
2026-09-18Max40/60
67%
GLM 5.3 FlashX 在 Pi 平台上测试 V2.2 强化评测。速度接近 DeepSeek V4 Flash,明显比 GLM 5.3 Flash 快。Q1 句子生成有 5 句为凑数字硬去单位不通顺(5分);Q2 SVG 鹈鹕骑自行车实现完整、第一个比较达标的模型(8分);Q3 复合弓 SVG 两处硬伤:箭是推非射、弓弦与拉弓手方向矛盾(6分);Q4 浏览器 OS UI 不错但太空射击飞机小子弹大、无法判断子弹来源(6分);Q5 赛车画面模糊蒙查查、撞车感知不清(6分);Q6 Trello 看板功能全但列表添加和拖动时屏幕闪动、交互偏硬(8分)。整体是 GLM 5.3 Flash 的速度优化版本,牺牲部分细节换速度。
模型参数
开发商智谱AI
架构MoE
发布2026-09-18
思考深度Max
总参数320B
激活参数18B (MoE)
上下文窗口1M
多模态文本/图像/视频/音频
输入价格¥0.8/M
开源开源
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第4、6、7、8、10句为凑成数字结尾硬生生去掉单位,读起来很不通顺。
Q2鹈鹕土星环骑自行车SVG测试
8/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
虽然难度调低了,但仍是第一个实现得比较完整的模型,鹈鹕和自行车结构清晰,动作同步自然。
Q3复合弓射箭SVG测试
6/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
箭是被弓箭手推出去的而非射出去的,弓弦在复合弓左边但弓箭手却用右手拉弓,存在两处硬伤。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 不错,右上角弹窗正常,dock 栏应用正常;但太空射击飞机小子弹大,不移动根本看不出子弹从自己飞机发射。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
画面模糊蒙查查,看得很辛苦,撞车都不太清楚,其他没明显问题。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能全正常,但列表添加后整个屏幕闪动,卡片拖动和列表拖动也是闪动厉害,交互不好。
Union Alpha(Pi)
2026-09-17Max38/60
63%
神秘模型Union Alpha测评,总分38/60。Q1指令遵循7、8句有问题得8分;Q2土星环SVG第一个做对一半转弯但细节不足得7分;Q3复合弓SVG问题较多(箭头反、弦不全等)得4分;Q4浏览器OS UI清新功能完整得8分;Q5赛车游戏画面模糊、障碍物缺失得6分;Q6 Trello看板因超时只得5分五五开。整体表现中规中矩,速度慢且限流严重。
模型参数
开发商匿名(Stealth)
架构未知
发布2026-09-16
思考深度Max
总参数未知
激活参数未知
上下文窗口262K
多模态文本/图像
输入价格免费(预览期)
开源闭源
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第七句不以汉字数字结尾,第八句不通顺,其余基本达标。
Q2鹈鹕土星环骑自行车SVG测试
7/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
第一个做对一半转弯的模型,左转弯对;但右转弯倒立、骑到土星顶部而非土星环,空间感稍差。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
弓箭箭头反、只有一根弦、滑轮不同步转动、拉弦方向反、缺瞄准镜,细节问题多,整体很水。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI清新,弹窗正常,Dock栏功能正常,太空射击游戏实现不错,飞机形状和上下左右控制OK。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
画面有点模糊,障碍物缺失(只看到奖杯,看不到障碍物),与提示词描述不符。
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
因限速超时无法完成,得五五开。
Doubao-Seed-2.1-pro 260915(Pi)
2026-09-17high37/60
62%
Doubao-Seed-2.1-pro 260915 在 Pi 平台跑 V2.2 强化评测,上下文、max tokens 与思考模式全部开到最大。Q1 强约束指令遵循:句子都从 1 到 10 结尾,但第 5、7、9 句不通顺,错 3 句得 7 分。Q2 鹈鹕土星环骑自行车:鹈鹕和自行车直接消失,是同题已测模型中唯一主体缺失的,得 3 分。Q3 复合弓射箭:头断了、轮子不像复合弓的反而像闹钟、弓弦只有一根,得 6 分。Q4 浏览器 OS:右上角弹窗跑到左上角、计算器不工作、太空射击游戏无法移动,得 6 分。Q5 3D 赛车:画面过于模糊看不清路况,得 7 分。Q6 Trello 看板:列表与卡片增删改拖动均正常,唯独不能改标题,得 8 分。合计 37/60,为 V2.2 目前最低(其余 43–46)。⚠️ V2.2 换掉了两道推理题,总分虽同为 60 但题目构成不同,跨版本只可比 Q1/Q4/Q5/Q6,不能直接比总分。
模型参数
开发商字节跳动
架构未知
发布2026-09-15
思考深度high
总参数未知
激活参数未知
上下文窗口1024K(1M)
多模态文本/图像/视频
输入价格未知
开源闭源
Q1强约束指令遵循句子生成测试
7/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子明显都是从 1 到 10 结尾的,但不仔细看差点被它糊弄过去:只看尾部几个字感觉都没问题,读完整句会发现第 5、7、9 句都不通顺。
Q2鹈鹕土星环骑自行车SVG测试
3/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
前几天测了好几个国内顶尖大模型都做不好,豆包更离谱——鹈鹕和自行车都不见了。是已测模型中唯一出现主体缺失的(其余模型均为结构正常、仅骑行姿态有误)。
Q3复合弓射箭SVG测试
6/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
真抠细节问题不少:头断了、轮子不是复合弓的轮子反而像个闹钟。测评者认为毕竟是 SVG 不必太强求,比较严重的是弓弦只有一根——复合弓与一般弓箭不同,不会只有一根弦。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 看上去还可以,但点击右上角 icon 弹窗却跑到左上角;Dock 栏的计算器不工作,点几次等于号都没算出结果;压轴的太空射击游戏其他都还好,就是没法移动——按下左右键一放手飞机立刻回弹到原来位置。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
画面太模糊,根本看不清楚路况,视力稍微不好都很难躲开障碍物。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
列表增删改拖动没有问题,待办卡片增删拖动也没有问题;唯一的问题是没有办法改标题,点进去根本找不到改标题的地方。
腾讯混元Hy4-Preview
2026-09-14high43/60
72%
腾讯混元 Hy4 Preview 在 V2.2 强化评测中只重测了 Q2、Q3 两道 SVG 题,Q1/Q4/Q5/Q6 分数沿用 9/2 V2.1(Workbuddy 平台)测评。Q2 鹈鹕土星环骑自行车得 6 分:土星背景与环形跑道可辨,鹈鹕与自行车结构基本清晰,车轮旋转同步,但三个典型问题——①自行车不会真正转弯而是闪现回正确方向;②鹈鹕屁股未坐在坐垫上(坐垫有铁状凸出);③鹈鹕双腿画在同一侧(横杠未遮挡右腿)。Q3 复合弓射箭得 6 分:平衡杆方向正确,弓箭方向反转(瞄具朝向错误)。⚠️ 注意:V2.2 换掉了两道推理题,总分虽同为 60 但题目构成不同,跨版本只可比 Q1/Q4/Q5/Q6,不能直接比总分。
模型参数
开发商腾讯
架构MoE
发布2026-08
思考深度high
总参数770B
激活参数49B (MoE)
上下文窗口1M
多模态文本/图像
输入价格免费
开源开源
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
未重测,沿用 9/2 V2.1(Workbuddy)测评成绩:句子均以一到十结尾但文风偏古文,按一半折算 5 句达标。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
土星背景与环形跑道可辨,鹈鹕与自行车结构基本清晰,车轮旋转同步。三个典型问题:①自行车不会真正转弯而是闪现回正确方向;②鹈鹕屁股未坐在坐垫上(坐垫有铁状凸出);③鹈鹕双腿画在同一侧(横杠未遮挡右腿)。
Q3复合弓射箭SVG测试
6/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
平衡杆方向正确,弓箭方向反转(瞄具朝向错误)。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/2 V2.1(Workbuddy)测评成绩:右上角弹窗不错,UI 中规中矩功能无问题,太空射击游戏 3D 感出来了。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/2 V2.1(Workbuddy)测评成绩:实现挺不错,UI 也 OK,特意要求直接交付不做 UI 验证仍能达到这个完成度。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/2 V2.1(Workbuddy)测评成绩:列表和任务卡片增删改、跨列表拖动基本功能正常,但 UI 多一个突兀加号按钮。
Qwen3.8 Max 0902(Pi)
2026-09-13xhigh46/60
77%
Qwen3.8 Max 0902 在 Pi 平台上首跑 V2.2 强化评测,只重测了升级后的 Q2、Q3 两道 SVG 动画题,Q1/Q4/Q5/Q6 分数沿用该模型 9/2 V2.1 测评。Q2 鹈鹕土星环骑自行车得 6 分:鹈鹕与自行车结构无问题,但骑到右侧后整个倒转过来,与 GLM 5.3 Flash 的失效位置刚好相反(GLM 是在上方跑道正常、来到下面跑道才倒转)。Q3 复合弓射箭得 5 分:弓箭方向明显是反的,且人物右手拉弓时穿过持弓的左手造成穿帮。⚠️ 注意:V2.2 换掉了两道推理题,总分虽同为 60 但题目构成不同,跨版本只可比 Q1/Q4/Q5/Q6,不能直接比总分。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-08-03
思考深度xhigh
总参数~2.4T
激活参数~95B (MoE)
上下文窗口1M
多模态文本/图像/视频
输入价格¥12/M
开源部分开源(权重已开源)
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
未重测,沿用 9/2 V2.1 测评成绩:十条语句通顺达标,完美通过。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
看效果:鹈鹕和自行车结构没有问题,但到了右边之后,鹈鹕和自行车就倒过来了。这一点和 GLM 5.3 Flash 刚好相反——GLM 是在上方跑道正常,来到下面跑道就倒过来。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
两处硬伤:①弓箭明显是反的;②人物右手去拉弓的时候,是穿过了持弓的左手的,属于明显的穿帮。(与上一集 GLM 5.3 Flash 同题的问题数量持平)
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/2 V2.1 测评成绩:UI 精致,弹窗与 Dock 栏运行正常,功能完整。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/2 V2.1 测评成绩:整体尚可,少量障碍物贴图粗糙,空格键/鼠标点击无法发射子弹存在功能 bug。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/2 V2.1 测评成绩:UI 观感舒适,拖拽增删改功能运行稳定。
GLM 5.3 Flash(Pi)
2026-09-13Max45/60
75%
GLM 5.3 Flash 在 Pi 平台上首跑 V2.2 强化评测,只重测了升级后的 Q2、Q3 两道 SVG 动画题,Q1/Q4/Q5/Q6 分数沿用该模型 8/28 V2 测评。Q2 鹈鹕土星环骑自行车得 6 分:鹈鹕与自行车结构无问题、也确实沿着土星环环形跑道骑行,但骑到右侧后鹈鹕和车都沉到跑道下方,没理解要在跑道上方骑行,只是想着绕轨道跑;耗时超 20 分钟,明显慢于 DeepSeek 的 10 分钟以内。Q3 复合弓射箭得 5 分:弓箭方向明显是反的,射箭手势不对、像在扯线而非开弓射箭。⚠️ 注意:V2.2 换掉了两道推理题,总分虽同为 60 但题目构成不同,跨版本只可比 Q1/Q4/Q5/Q6,不能直接比总分。
模型参数
开发商智谱AI
架构MoE
发布2026-08
思考深度Max
总参数320B
激活参数18B (MoE)
上下文窗口1M
多模态文本/图像/视频/音频
输入价格¥0.8/M
开源开源
Q1强约束指令遵循句子生成测试
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
未重测,沿用 8/28 V2 测评成绩:第 2 句觉得不大对,应该是「独一无二」才通顺,认为错 1 句,共 9 句通过。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
同样是最高思考深度,花了二十多分钟才出结果,而 DeepSeek 十分钟之内就做好了,慢太多。结果层面:鹈鹕和自行车结构没有问题,也确实沿着土星环环形跑道骑行;但到了右边之后,鹈鹕和车都变成在跑道下面,说明它没有理解要在跑道上方骑行,只是想着要绕着轨道跑。
Q3复合弓射箭SVG测试
5/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
两处硬伤:①弓箭明显是反的;②人物射箭的手势不对,感觉像是在扯线,而不是开弓射箭。(比上一集 DeepSeek V4.1 Flash 同题的三处硬伤少一处)
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 8/28 V2 测评成绩:WiFi 等图标在左边而非右上角,弹窗超出右边界;但 Dock 栏应用正常;太空射击游戏是近期看到最好的实现,有 3D 的感觉,敌机也是真的飞机。
Q53D 赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 8/28 V2 测评成绩:实现挺不错,扣分因为撞一次就挂了(其他模型多为减血条),可玩性偏低。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 8/28 V2 测评成绩:UI 看上去舒服,全部功能测试下来没有问题,卡片和列表的增删改、拖动等功能都正常。
DeepSeek V4.1 Flash 正式版(Pi)
2026-09-13Max45/60
75%
DeepSeek V4.1 Flash 正式版在 Pi 平台上首次跑 V2.2 强化评测,本期为 V2.2 首测。只重测了升级后的 Q2、Q3 两道 SVG 动画题,Q1/Q4/Q5/Q6 分数沿用该模型 9/11 V2.1 正式版测评。Q2 鹈鹕土星环骑自行车两次尝试均未沿土星环骑行、自行车不懂转弯(快踩出环道才闪现回正),但鹈鹕与车体结构无问题,得 6 分;Q3 复合弓射箭三处硬伤——上下滑轮转动方向相同(真实复合弓应反向)、双手纠缠成麻花、人物直面屏幕未面向靶子,得 4 分。⚠️ 注意:V2.2 换掉了两道推理题,总分虽同为 60 但题目构成不同,跨版本只可比 Q1/Q4/Q5/Q6,不能直接比总分。
模型参数
开发商DeepSeek
架构MoE(因果编码器-解码器非对称结构)
发布2026-09-10
思考深度Max
总参数552B
激活参数输入侧 ~8B / 输出侧 ~16B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格¥1/M(空闲)/ ¥2/M(高峰)
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
未重测,沿用 9/11 V2.1 正式版成绩:全部句子以 1 到 10 结尾,逐句读完都通顺达标,满分。
Q2鹈鹕土星环骑自行车SVG测试
6/10
请生成一段独立完整的 16:9 纯 SVG 动画:一只鹈鹕骑着自行车,车轮旋转,鹈鹕踩动脚踏,沿着土星环轨道进行 360° 环形骑行。鹈鹕和自行车结构清晰。在椭圆轨道的左右极端转弯处,动作必须自然平滑,不能出现车身倒立或瞬间闪现掉头。只输出 SVG,无外部资源。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
第一次跑完全没按提示沿土星环骑行;给第二次机会重跑仍不行,对提示词里「土星环环形跑道」的理解有问题。自行车踩到环道左右两侧时不懂得转弯,快踩出环道时突然闪现回正确方向。但两轮测试里鹈鹕与自行车的结构都没看到任何问题。
Q3复合弓射箭SVG测试
4/10
生成独立完整、不引用外部图片的16:9的 SVG 动画。画面是人物拉开复合弓,滑轮同步转动;松开弓弦,箭按抛物线飞行,最后命中靶心。所有图形全部用 SVG 绘制,只输出 SVG 代码,不要多余文字。注意:实现后只做基本语法检查,不能查看渲染后结果进行调整。
三处问题:①拉弓时上下滑轮转动方向相同,而按真实复合弓机械结构,上轮逆时针时下轮应顺时针;②人物的两只手像麻花一样纠缠在一起,手部结构明显不对;③人物是直面屏幕,而不是面向靶子射击。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/11 V2.1 正式版成绩:桌面首次不是静态图片而是带动画效果、右侧 widgets 与弹窗精美、Dock 应用正常,但压轴太空射击游戏完全没法玩。
Q53D 赛车游戏
10/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/11 V2.1 正式版成绩:被评为测评以来实现得最好的之一,车辆模型完整、画面惊艳,全库首个 Q5 满分。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
未重测,沿用 9/11 V2.1 正式版成绩:深色主题看板基本功能均正常,待办卡片拖动动画欠佳,目标卡片未跟随。
Benchmark V2.1
V2.1Benchmark
v2.1v2.1 - 六维强化评测6 道题,满分 60
6道题覆盖指令遵循、数学推理、密码推理、UI编程、3D游戏开发、交互组件实现(推理题要求多解法与纯推理、编程题仅语法验证)
Q1强约束指令遵循句子生成测试指令遵循
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
严格遵循所有约束条件,句子通顺自然
Q224点问题数学推理
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
答案: (√8 × √(10−7))² 或者 √((10−7)×8)² 或 10 + 7×√(8÷2) = 24正确得出24点,解法符合规则
Q3密码锁推理题逻辑推理
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案: 7294364推理过程严谨,最终答案正确
Q4浏览器内操作系统综合UI编程
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
①右上角WiFi等点击有弹窗 ②Dock栏应用可正常打开 ③太空射击游戏可玩
Q53D 赛车游戏3D 游戏开发
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
赛博朋克风格、摄像机追踪动效、避障反馈、动态计分板
Q6Trello 看板交互组件
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
拖拽动画流畅、看板自动滚动、原位放大弹窗、子任务与标签编辑
模型测试日期思考总分正确率测评
Kimi K2.8 Preview(Pi)
2026-09-12—42/60
70%
Kimi K2.8 Preview 在 PI 平台实测 42/60,推理侧极度偏科。新版 24 点三组解法全部符合要求、密码锁 7294364 推理正确,但第一题强约束指令遵循只有第 1、4 两句符合「以一到十结尾」的要求,其余 8 句全部不达标——该题 2 分仅次于两例 0 分(讯飞星火网页版、Mercury 2.5),是全库倒数第三。编程侧以 Q6 Trello 看板发挥最好,UI 有科技感、增删改拖动全部正常;Q4 浏览器操作系统首版点击无响应,靠额外 prompting 返修后才可用,按「一次过」标准扣至 5 分;Q5 3D 赛车车道方向错误、开局即堆满障碍物,仅能做到可启动游玩。整体不如此前网传的那般能打。
模型参数
开发商月之暗面(Moonshot AI)
架构未知
发布2026-09-11
总参数未知
激活参数未知
上下文窗口1M
多模态文本(据报道支持图像/视频输入)
输入价格未公布
开源闭源
Q1强约束指令遵循句子生成测试
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
只有第一和第四句符合「从 1 到 10 结尾」的要求,其余 8 句全部不达标;达标的那两句通顺。
Q224点问题
10/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
要求给出三个解,三个解都完全符合提示词要求。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
新版七位密码锁推理,答案 7294364 正确。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
首版点击无反应,模型被额外 prompting 返修一轮后才可用——按「一次过」标准扣分;修复后右上角弹窗尚可、Dock 应用功能正常,但压轴太空射击游戏直接报错。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
车道方向不对,游戏一开始就堆满各种障碍物,两下就挂、根本闪躲不了;不过仍可启动游玩。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
无第三方库实现,UI 看上去有科技感,任务与列表的增删改拖动都没有问题,是三道编程题中唯一让人满意的实现。
MiMo X Pro Preview(MiMo Desktop)
2026-09-11—29/60
48%
密码锁推理题答对,但数学推理和编程题表现较差。24点三组解法全违规,3D赛车游戏完全无交互,Trello看板多项功能异常,仅弹窗和Dock栏基本正常。
模型参数
开发商小米
架构未知
发布2026-09-08(预览版内测)
总参数未知
激活参数未知
上下文窗口未知
多模态未知
输入价格免费(预览版)
开源闭源(预览版)
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第4、7、8、9句明显不通顺,第6句表达别扭
Q224点问题
0/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
三组解法全违规,都重复使用了题目限定数字
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案正确:7294364
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
弹窗正常,Dock正常,太空射击无法发射子弹
Q53D 赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
完全无交互,是一张静态图片
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
卡片编辑失败,列表拖动失败,删除按钮状态异常
Nex-N2.5 Pro(Pi)
2026-09-11—36/60
60%
Nex-N2.5 Pro V2.1 实测 36/60,在 Pi 平台免费体验。推理侧:Q1 约束指令基本达标但第五句出错得 8 分,Q2 24 点新版三解法死循环得 0 分,Q3 密码锁 7294364 正确拿满分 10 分。编程侧:Q4 OS 弹窗正常但 Finder 图标遮挡和计算器圆角 bug、太空射击完全无法玩得 5 分;Q5 3D 赛车功能可跑但道路漆黑极易翻车得 7 分;Q6 Trello UI 清新但文字重叠、拖拽受限、无删除按钮得 6 分。最大短板:速度极慢,整套测评耗时超 5 小时(对比 DeepSeek V4.1 正式版约 1 小时),实用性受限。
模型参数
开发商Nex AGI
架构MoE(多模态)
发布2026-09
总参数397B
激活参数~17B(MoE 激活)
上下文窗口262K
多模态文本/图像
输入价格免费(OpenRouter)
开源开源
Q1强约束指令遵循句子生成测试
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第五句没有以数字5结尾,其余通顺。
Q224点问题
0/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
耗时很久,最后陷入思考死循环没能得出结果。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案 7294364 正确。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
WiFi弹窗正常;Finder文件图标显示不全被面板遮挡,计算器0号按键圆角异常;太空射击游戏完全无法游玩。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能基本正常可跑,但道路漆黑辨别度极低、路灯缺失、极易翻车,体验较差。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
小清新风格UI配色不错,但标题与内容文字重叠、卡片拖拽到其他列表位置受限、待办卡片找不到删除按钮。
DeepSeek V4.1 Flash 正式版(Pi)
2026-09-11—49/60
82%
DeepSeek V4.1 Flash 正式版 V2.1 实测 49 分,较 9/8 内测版的 50 分回落 1 分。推理侧一喜一忧:Q1 强约束句子生成全部通顺达标拿满分(内测版第七句不通顺仅 9 分),Q3 密码锁 7294364 正确;但 Q2 新版 24 点三组解法全部违规——方法一多用一个 2,方法二、三靠开立方引入 3,从内测版的 10 分暴跌至 4 分,是本次最大短板。编程侧明显进步:Q4 桌面首次出现动态动画、右侧 widgets 与弹窗精美、Dock 应用正常,可惜压轴太空射击游戏无法游玩,得 7 分(内测版桌面空白仅 4 分);Q5 3D 赛车被评价为「测评以来实现得最好的之一」,车辆建模完整、画面惊艳,成为全库首个 Q5 满分;Q6 Trello 深色看板功能正常,仅卡片拖动动画欠佳,得 8 分。
模型参数
开发商DeepSeek
架构MoE(因果编码器-解码器非对称结构)
发布2026-09-10
总参数552B
激活参数输入侧 ~8B / 输出侧 ~16B(MoE 激活)
上下文窗口1M
多模态文本/图像(仅文本输出)
输入价格¥1/M(空闲)/ ¥2/M(高峰)
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
全部句子均以 1 到 10 结尾,逐句读完都通顺达标,无瑕疵,拿满分。
Q224点问题
4/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
三组解法全部违规:方法一多用一个 2,方法二、方法三开立方引入 3,均不符合 2、7、8、10 各只能出现一次的硬性规则,无一组有效。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案 7294364 正确。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
桌面首次不是静态图片而是带动画效果,右侧还有漂亮的 widgets;左上角弹窗精美,Dock 栏应用均正常工作。但压轴太空射击游戏完全没法玩,「临门一脚」非常可惜。
Q53D 赛车游戏
10/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
「卧槽!这才是赛车啊!」被评为测评以来实现得最好的之一:界面漂亮,车辆模型完整、不是散装方块糊弄,功能完整无 bug。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
深色主题 UI(审美见仁见智),基本功能均正常;待办卡片拖动动画欠佳,拖动时目标卡片未跟随。整体仍是个挺好的实现。
讯飞星火 X2.5(Pi)
2026-09-10—40/60
67%
讯飞星火 X2.5 API 版(Pi 测试)V2.1 实测 40 分,比网页版(15分)大幅提升。密码锁推理题答对(Q3=10),API 推理能力明显优于网页版。编程题整体中规中矩,浏览器 OS UI 观感不错,太空射击游戏可玩但有白块瑕疵,3D 赛车和 Trello 看板功能基本正常但各有小问题。最大遗憾是 24 点问题因最大输出截断只返回一组解,若上下文能更大表现应会更好。
模型参数
开发商科大讯飞
架构MoE (293B-A30B)
发布2026-09-07
总参数293B
激活参数~30B(MoE 激活)
上下文窗口256K
多模态文本(输入含图像/音频多模态理解)
输入价格¥1.6/M
开源闭源(云端旗舰版;端侧 4B/1.7B 开源 Apache 2.0)
Q1强约束指令遵循句子生成测试
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子5、7、8不通顺,其他还好,第10句口语化。
Q224点问题
4/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
32K最大输出截断,只算出一组正确解法,要求三个解法。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案正确 7294364,推理能力让人意外。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI观感不错,右上角弹窗效果在线,Dock基本功能正常,命令行终端高度偏小,太空射击游戏可玩但有不明白色方块UI瑕疵。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
能正常运行,UI不算很漂亮但也不是不漂亮,速度稍微有点快。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI科技感,卡片跨列表拖动正常,列表拖动失效,输入标题有显示bug,待办添加后有残留文字。
Mercury 2.5(Pi)
2026-09-09—11/60
18%
Mercury 2.5(Inception Labs 扩散大模型)实测仅11分:生成速度确实飞快,但质量全面崩盘。三道推理题全部零分——指令遵循句子无一通顺、24点宣告无解、七位密码锁答案错误。编程题仅勉强产出可用雏形:浏览器OS无弹窗仅计算器勉强能用、赛车躲过首个障碍后不再刷新、Trello建列表后卡片无法创建拖动。空有极速噱头,推理与落地能力拉胯,扩散LLM成熟度仍待提升。
模型参数
开发商Inception(Inception Labs)
架构扩散 LLM(Diffusion,非自回归)
发布2026-09-08
总参数未知
激活参数未知
上下文窗口260K
多模态文本
输入价格$0.2/M
开源闭源
Q1强约束指令遵循句子生成测试
0/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子结尾覆盖1到10,但没有一句通顺,全部失败。
Q224点问题
0/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
一本正经宣称经过严格数学推理解不出来,除非题目去掉数字2。
Q3密码锁推理题
0/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
给出答案7143637,与正确答案7294364不符,明显做错。
Q4浏览器内操作系统
3/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
无弹窗,Dock栏应用除计算器勉强能工作外其他均不行,太空射击游戏完全失效。
Q53D 赛车游戏
4/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI虽丑陋但起码有个样子,躲过第一个障碍物后不再刷新障碍,无法继续。
Q6Trello 看板
4/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
初始界面过长,创建列表后无法新建卡片、无法拖拽,核心功能不可用。
Agnes 3.0 Flash
2026-09-09—5/60
8%
Agnes 3.0 Flash 实测仅5分,全面拉胯。指令遵循半数通顺勉强5分,其余五题全部失败:24点运行异常中断,密码锁推理答案错误,三道编程题不是报错就是流式中断,服务稳定性极差。除免费外无任何亮点,一言难尽。
模型参数
开发商Sapiens AI
架构未知
发布2026-09
总参数未知
激活参数未知
上下文窗口512K
多模态文本/图像/工具调用/推理
输入价格免费
开源闭源
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
通顺的只有1、2、8、修正后的9以及10这5句。
Q224点问题
0/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
异常结束,估计是思考时间太长把上下文给撑爆了。
Q3密码锁推理题
0/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
给出答案4 8 4 5 6 3 4,与正确答案7294364完全不符。
Q4浏览器内操作系统
0/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
出错了,无法继续,只能放弃。
Q53D 赛车游戏
0/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
跑了很长时间后异常中断,服务不稳定。
Q6Trello 看板
0/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
Stream ended without finish_reason,失败。
DeepSeek V4.1 Flash(Pi)
2026-09-08—50/60
83%
DeepSeek V4.1 Flash 内测版 V2.1 实测 50 分。推理题三题全对(Q1 第七句不通顺扣分,Q2/Q3 答案正确速度飞快)。编程题:Q4 浏览器 OS 弹窗精美 Dock 功能正常,太空射击游戏报错无法游玩扣分;Q5 3D 赛车功能正常无 bug 得 8 分;Q6 Trello 看板中规中矩,功能增删改拖动均正常得 8 分。作为 Flash 版本最大亮点是速度飞快地通过全部推理题。
模型参数
开发商DeepSeek
架构MoE
发布2026-07(V4 Flash);V4.1 内测 2026-09
总参数284B
激活参数~13B(MoE 激活)
上下文窗口1M
多模态文本
输入价格¥1/M(空闲)/ ¥2/M(高峰)
开源开源(MIT)
Q1强约束指令遵循句子生成测试
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
第七句不通顺,其他看上去还好。
Q224点问题
10/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
三个解法全部正确。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案正确 7294364。
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
右上角弹窗精美 Dock 功能正常,但桌面空白(背景图未加载)且压轴太空射击游戏报错无法游玩。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能正常无 bug,无明显亮点。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
中规中矩,列表和卡片增删改拖动均正常。
讯飞星火 X2.5(讯飞星火)
2026-09-07—15/60
25%
讯飞星火 X2.5(科大讯飞 2026-09-07 发布的旗舰云端版,293B-A30B MoE)V2.1 实测仅 15 分,是当前榜单最低分。三道推理题全军覆没:Q1 强约束指令结尾全错、Q2 24 点服务器繁忙无答案、Q3 七位密码锁给出错误答案 6340727;编程题三个项目虽能跑但质量堪忧:浏览器 OS 弹窗能用但 UI 简陋、终端输入 help 后失效、太空射击画面漆黑看不到战机;3D 赛车车不动只剩障碍物冲过来;Trello 看板 UI 普通,列表回车无反应、待办标题无法输入、描述丢失、卡片不能拖动、找不到删除入口。整体表现严重翻车,与近期测过的 GPT-6(58 分)、Fable 5.1(54 分)、Muse Spark 1.3(45 分)差距悬殊。
模型参数
开发商科大讯飞
架构MoE (293B-A30B)
发布2026-09-07
总参数293B
激活参数30B(MoE 激活)
上下文窗口256K
多模态文本(输入含图像/音频多模态理解)
输入价格¥1.6/M
开源闭源(云端旗舰版;端侧 4B/1.7B 开源 Apache 2.0)
Q1强约束指令遵循句子生成测试
0/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子结尾全部都不是从 1 到 10 结尾,整题全错。
Q224点问题
0/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
长时间思考后直接抛出服务器繁忙错误,未返回任何有效答案。
Q3密码锁推理题
0/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
给出答案 6340727,与标准答案 7294364 完全不符。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
弹窗功能正常,UI 整体简陋;Dock 栏终端输入 help 后后续任何输入回车均无反应;压轴太空射击游戏画面漆黑看不见战机,但右上角分数却一直在飙。
Q53D 赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
车辆静止不动,障碍物一个劲冲过来,根本不是在赛车而是在赛障碍物。
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 普通与高颜值差距大;列表标题回车无反应;点击添加待办直接弹窗且弹窗标题无法输入;描述添加后重新打开丢失;标签无效果;卡片和列表均无法拖动,也找不到删除入口。
Muse Spark 1.3(Pi)
2026-09-06—45/60
75%
Meta 闭源多模态推理模型 Muse Spark 1.3(OpenRouter/PI-Agent 干净环境)V2.1 实测 45 分。推理题是亮点:24 点三解全对、7 位密码锁顺利答对;编程题浏览器 OS 与 Trello 看板功能完整可运行。短板集中两处:Q1 强约束指令句子 6-9 句存在不通顺/缺字/语义缺陷,Q5 3D 赛车道路无法渲染几乎不能游玩;娱乐性项目整体对比 GPT-6 Astra(55 分)、Claude Fable 5.1(54 分)差距明显。整场消耗 301K tokens、$0.89(约 ¥6+),性价比高。
模型参数
开发商Meta(Superintelligence Labs)
架构未知
发布2026-09-02
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/视频/PDF/音频(仅文本输出)
输入价格$1.25/M
开源闭源
Q1强约束指令遵循句子生成测试
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
1-10 结尾格式无误,但 6、7 句语句生硬不通顺,第8句缺文字('腊八'后应加'粥'字才顺畅),第9句语义错误(应为'已过九九'才春暖花开),共 4 句有明显问题。
Q224点问题
10/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
三个解均合规正确;用 log 属初等数学符号,本次确认合规(评审承认此前测 GPT-6 时对 log 误判)。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案 7294364 正确,7 位密码锁纯推理顺利答对。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
界面不错,右上角弹窗、Dock 栏应用运行正常,压轴太空射击游戏功能完整可玩;但终端输入框较丑、射击游戏实现普通(对比 GPT-6/Fable 5.1 差距明显),扣 UI 观感分。
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
实现不行,道路无法渲染、看不到路几乎等于盲开,基本不能游玩。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI 不错,增删改、拖拽等主要功能正常;仅编辑待办卡片时标题栏过窄看不到标题的单点 UI 缺陷。
GPT-6 Astra
2026-09-05—58/60
97%
GPT-6 Astra(OpenAI 旗舰)V2.1 祖传实战实测 58 分,表现顶尖:Q1 指令遵循全对、Q3 七位密码锁顺利答对;Q2 24 点三解全对(其中 log 属初等数学符号,此前误判为违规,已更正满分);编程题完成度极高,浏览器 OS UI 漂亮、太空射击游戏与弹窗均无问题(Q4 满分),3D 赛车仅碰撞穿透小瑕疵,Trello 功能无问题。整体领先 Fable 5.1(54 分)、Gemini 3.8 Flash(49 分)与 Qwen3.8 Max 0902(47 分)。
模型参数
开发商OpenAI
架构未知
发布2026-09-03
总参数~5T
激活参数未知
上下文窗口1.05M
多模态文本/图像(仅文本输出)
输入价格$10/M
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
强约束指令遵循句子生成测试全部正确,完美通过。
Q224点问题
10/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
三个解全部合规正确;log 属初等数学符号,不违反“仅用初等数学符号”约束(此前误判为违规,已更正为满分)。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案 7294364 正确,7 位密码锁顺利答对。
Q4浏览器内操作系统
10/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
界面看上去很漂亮,Dock 栏应用没有问题,压轴的太空射击游戏玩下来也很棒,右上角弹窗没有问题,超出预期给满分。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
实现也很不错,唯一小瑕疵是撞击障碍物之后会直接穿透过去,不影响整体可玩性,给9分。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
实现风格与原生 Trello 差异很大,但提示词未要求一致故不算问题;功能没有问题。
Gemini 3.8 Flash(DSH)
2026-09-03—49/60
82%
Gemini 3.8 Flash 推理能力表现出色,Q1指令遵循完美,Q2三解合规,Q3七位密码锁顺利答对。编程题偏弱:Q4浏览器OS UI精致但太空射击有操控bug,Q5赛车UI简陋车辆漂移,Q6 Trello看板卡片功能正常但列表拖动换位失效。综合49分,推理强但编程有短板。
模型参数
开发商Google/DeepMind
架构MoE
发布2026-09-02
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格$0.75/M(限时优惠,原价$1.50/M)
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子结尾都是从1到10结尾的,所有句子都是通顺的,完美通过。
Q224点问题
10/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
三个解法全部正确且符合提示词要求,24点推理能力出色。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案7294364正确,7位密码锁比V2版本5位难度大增,仍顺利答对,表现优于Fable 5.1。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI精致,弹窗与Dock栏运行正常;太空射击游戏3D效果不错,但连续射击时左右方向键会中断射击,碰撞缺乏反馈效果。
Q53D 赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI简陋,车辆存在漂移问题,可玩性一般。
Q6Trello 看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
卡片增删改拖动正常,但列表拖动换位功能失效,属于提示词要求的重要功能缺失。
Qwen3.8 Max 0902(DSH)
2026-09-02—47/60
78%
Qwen 3.8 Max 新版(0902)V2.1 实测47分。推理题偏弱:Q1指令遵循完美,Q2给出替代正确解法得8分,Q3虽多位置推理正确但最终答案未推出仅得4分。编程题整体出色:Q4浏览器OS功能完整,Q5赛车有功能bug得7分,Q6 Trello看板UI舒适功能稳得9分。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-08-03
总参数~2.4T
激活参数~95B (MoE)
上下文窗口1M
多模态文本/图像/视频
输入价格¥12/M
开源部分开源(权重已开源)
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
十条语句通顺达标,完美通过。
Q224点问题
8/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
前两解正确,第三解误用开立方违规。备选方案正确,给8分。
Q3密码锁推理题
4/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
宣告无解。思考过程中多个位置推理正确,最终答案未推出,给4分。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI精致,弹窗与Dock栏运行正常,功能完整。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
整体尚可,少量障碍物贴图粗糙,空格键/鼠标点击无法发射子弹存在功能bug。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI观感舒适,拖拽增删改功能运行稳定。
Fable 5.1
2026-09-02—54/60
90%
Fable 5.1 实测总分54,表现全面。强约束句子全部达标且通顺;24点仅两解合规;7位密码锁顺利答对;编程三题均完成度较高,浏览器OS UI精致、Trello功能完整。Q1得分远超同日测试的腾讯混元Hy4-Preview(5分),整体领先。
模型参数
开发商Anthropic
架构未知
发布2026-09-01
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格$10/M
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子结尾都是从1到10结尾的,所有句子都是通顺的,完美达标。
Q224点问题
7/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
方法一不对(3不允许出现),方法二和方法三正确,仅两解合规。
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案7294364正确,7位密码锁比V2版本5位难度大增,仍顺利答对。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
UI挺漂亮,右上角弹窗效果不错,Dock栏应用能正常打开,太空射击游戏3D感敌人飞机效果一流。
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
赛车做得很漂亮,画面出彩,特意要求直接交付不做UI验证仍达到高完成度。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
功能没有问题,列表和任务增删改、拖动均正常,UI审美见仁见智。
腾讯混元Hy4-Preview(Workbuddy)
2026-09-02—48/60
80%
混元 Hy4-Preview 在 Workbuddy 平台的 V2.1 基准测试:7位密码锁推理顺利答对,24点前两解正确第三解数字重复违规;强约束句子10条仅5条达标且文风偏古文;编程三题完成度较高(浏览器OS弹窗不错、3D赛车挺不错、Trello功能正常但UI多一个突兀加号按钮)。整体在 Workbuddy 生态加持下比 Claude Code 版(43分)更佳,实力可圈可点。
模型参数
开发商腾讯
架构MoE
发布2026-08
总参数770B
激活参数49B (MoE)
上下文窗口1M
多模态文本/图像
输入价格$0.834/M
开源开源
Q1强约束指令遵循句子生成
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为".
句子均以一到十结尾但文风偏古文,模型自评3句通顺、4句有瑕疵、3句不通顺,按一半折算计5句达标
Q224点问题
7/10
请用 2、7、8、10 这四个数字,每个数字只能且必须使用一次。你可以使用阶乘之外的任何初等数学运算符(包括乘方/根号),请用三种不同的方法拼出 24 点。注意不能用编程写脚本的方式解,也不能用穷举法一个个去试,要靠大语言模型自己的推理能力推出答案
前两个解正确,第三个解2出现两次,不符合每个数字只能且必须使用一次的提示词要求
Q3密码锁推理题
10/10
有一把七位数密码锁,密码的每一位数字可以是0~9中的任意数字,**数字允许重复**(比如可能出现两个甚至更多相同的数字)。已知以下线索(其中"位置正确"统计的是恰好匹配的位数;"数字正确但位置不对"统计时,若密码和猜测中某个数字出现次数不同,只能按两者中较小的出现次数计入,且不能与已计为"位置正确"的那次重复计数): 0783384 —— 2个数字位置正确,1个数字正确但位置不对; 0445517 —— 0个数字位置正确,3个数字正确但位置不对; 6013167 —— 1个数字位置正确,2个数字正确但位置不对; 2674674 —— 2个数字位置正确,3个数字正确但位置不对; 4203772 —— 1个数字位置正确,3个数字正确但位置不对; 7197587 —— 2个数字位置正确,0个数字正确但位置不对; 9637451 —— 0个数字位置正确,5个数字正确但位置不对。 请据此推理出密码。注意不能用编程写脚本的方式解,要靠大语言模型自己的推理能力推出答案
答案7294364正确,密码长度从5位增至7位难度大增仍顺利答对,难能可贵
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
右上角弹窗不错,UI中规中矩功能无问题,太空射击游戏3D感出来了没看到明显问题
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
实现挺不错,UI也OK,特意要求直接交付不做UI验证仍能达到这个完成度
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能。最后要注意:实现后不要用无头浏览器等进行UI等其他验证,直接交付
列表和任务卡片增删改、跨列表拖动基本功能正常,但UI多一个突兀加号按钮
Benchmark V2
V2Benchmark
v2v2 - 六维综合评测6 道题,满分 60
6道题覆盖指令遵循、数学推理、密码推理、UI编程、3D游戏开发、交互组件实现
Q1强约束指令遵循句子生成测试指令遵循
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
严格遵循所有约束条件,句子通顺自然
Q224点问题数学推理
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案: 10 + 9 + 3 + √4 = 24正确得出24点,解法符合规则
Q3密码锁推理题逻辑推理
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案: 12753推理过程严谨,最终答案正确
Q4浏览器内操作系统综合UI编程
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
①右上角WiFi等点击有弹窗 ②Dock栏应用可正常打开 ③太空射击游戏可玩
Q53D 赛车游戏3D 游戏开发
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
赛博朋克风格、摄像机追踪动效、避障反馈、动态计分板
Q6Trello 看板交互组件
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
拖拽动画流畅、看板自动滚动、原位放大弹窗、子任务与标签编辑
模型测试日期思考总分正确率测评
SenseNova-6.8-Flash-Lite(Claude Code)
2026-08-29—31/60
52%
接入 Claude Code 实测商汤免费多模态智能体模型 SenseNova-6.8-Flash-Lite:强约束指令遵循十条句子仅两句合格,24点与密码锁推理顺利通关;但浏览器操作系统等三道编程题因 API 反复停止反应、5小时无法完成而全部失败,整场测评体验拉胯。
模型参数
开发商商汤科技
架构未知
发布2026-08-11
总参数未知
激活参数未知
上下文窗口256K
多模态文本/图像/文档/视频
输入价格免费
开源闭源
Q1强约束指令遵循句子生成测试
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
十条句子仅第1、9句合格,其余全部跑偏,强约束指令遵循能力很差
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案正确(12753)
Q4浏览器内操作系统
3/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
跑了27分钟后API反复停止反应,从下午2点半等到7点半仍未完成,无法测试
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
API反复停止反应,无法测试
Q6Trello 看板
3/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
API反复停止反应,无法测试
腾讯混元Hy4(Claude Code)
2026-08-28—43/60
72%
推理题仅密码锁正确,Q1对8句、Q2三个解法做多错多。编程题Q4浏览器OS UI精美弹窗超出预期、太空射击3D感强;Q5赛车代码未完成无法运行;Q6 Trello看板多余符号排版错乱但基本功能正常。全程最大问题是速度极慢多次触发请求限额,如算力跟上表现应更好。
模型参数
开发商腾讯
架构MoE
发布2026-08
总参数770B
激活参数49B (MoE)
上下文窗口1M
多模态文本/图像
输入价格$0.834/M
开源开源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第5和第8句不符合结尾从1到10的要求,其他8句通顺没问题。
Q224点问题
5/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
三个解法中第一个满足要求;第二个用了重复数字9违规;第三个用了阶乘违规。解法多反而做错多,没有做好指令遵循。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI不错弹窗精美超出预期,Dock栏功能正常,太空射击游戏效果真心不错3D感完全出来了功能也没问题。但耗时极长(一个多小时)且中间触发请求限额报错。
Q53D 赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
代码写到中途报错未完成,无法进入游戏无法玩。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
加号点击无反应、标签文字异常换行、待办编辑页面有多余奇怪符号;但基本增删改拖动功能没问题。
GLM 5.3 Flash(zcode)
2026-08-28—54/60
90%
整体表现相当能打,推理题三题全对(Q1对9句,Q2/Q3正确),编程题中太空射击游戏是近期看到最好的实现(有3D感),Trello看板UI舒服功能全正常。Q4浏览器OS小问题(WiFi图标位置偏左、弹窗超界),Q5赛车撞一次就挂设计偏严苛扣分。综合54/60,zcode加持下编程产出更好。
模型参数
开发商智谱AI
架构MoE
发布2026-08
总参数320B
激活参数18B (MoE)
上下文窗口1M
多模态文本/图像/视频/音频
输入价格¥0.8/M
开源开源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第2句觉得不大对,应该是'独一无二'才通顺,所以认为错了1句,共9句通过。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是 1 2 7 5 3,答案正确。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
WiFi等图标在左边而非右上角,弹窗超出右边界;但Dock栏应用正常;太空射击游戏是近期看到最好的实现,有3D的感觉,敌机也是真的飞机。
Q53D 赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
实现挺不错,扣分因为撞一次就挂了(其他模型多为减血条),可玩性偏低。
Q6Trello 看板
9/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI看上去舒服,全部功能测试下来没有问题,卡片和列表的增删改、拖动等功能都正常。
Qwen 3.8 Flash(Claude Code)
2026-08-27—51/60
85%
推理能力稳定在线,数学类题目(24点、密码锁)全部正确,编程题可圈可点但小问题偏多。浏览器OS弹窗超界、终端输入位置不对;赛车UI不错但撞车一次就挂设计不合理;Trello按钮文字未居中。综合表现不及Qwen 3.8 Max Preview(54分),但仍属可用水平。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-08-26
总参数125B
激活参数6B (MoE)
上下文窗口256K(扩展至1M)
多模态文本/图像/音频
输入价格¥1/M
开源部分开源(权重已开源)
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
从1到10结尾通顺,无明显问题。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,10+9+3+√4=24。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案正确,12753,推理过程无误。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
弹窗内容超出右边界;终端输入框在右侧且无明显输入位置标识;飞机子弹从肚子发射而非前方。扣分较严。
Q53D 赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
UI不错,功能无明显问题,实现完整度较高。但撞障碍物一次就挂(其他模型多为减血条),设计偏严苛。
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
其他功能正常,但编辑任务卡片时两个按钮文字未居中靠左。
DeepSeek V4 Flash Vision
2026-08-21—52/60
87%
推理题全对(Q1-Q3),但编程题耗时过长且有明显功能缺失:Q4浏览器OS右上角弹窗失效、太空射击完全无响应(飞机/按键均无反应);Q5赛车功能正常但耗时半小时;Q6看板功能全正常但耗时近一小时。综合编程表现与耗时不成正比。
模型参数
开发商DeepSeek/深度求索
架构MoE
发布2026-08-21
总参数284B
激活参数13B (MoE)
上下文窗口1M
多模态文本/图像
输入价格$0.22/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1到10,读起来顺畅,全对。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI还可以,但右上角各个icon点击都没有预期的弹窗,太空射击游戏没有看到任何飞机,左右键和鼠标都没有任何反应。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
功能没有问题,只是难度有点高。耗时半个多小时。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
耗时将近一小时,但列表和卡片的增删改、拖动等功能全部正常可用。
Ox Alpha(DSH)
2026-08-21—49/60
82%
整体表现能打,推理题全对,3D赛车无bug但UI未达惊艳。弱项在于指令遵循和UI细节:指令遵循6-9句结尾不符合数字要求,太空射击空格射击失效,Trello看板编辑有瑕疵、列表拖动有小问题。综合来看竞争力不错,目前 OpenRouter 可免费体验。
模型参数
开发商匿名(社区猜测可能为 Xiaomi/MiMo)
架构未知
发布2026-08
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/视频
输入价格免费
开源闭源
Q1强约束指令遵循句子生成
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
速度很快,但6-9句明显不是从1到9的数字结尾,不符合数字要求;其他句子正常。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
配色舒服,弹窗正常,Dock应用可打开,太空射击游戏空格射击功能失效(只能鼠标射击)。
Q53D赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
完成度高,功能基本无bug,但UI没有漂亮到10分的程度。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI漂亮,卡片拖动正常。但待办卡片编辑有问题(标题栏高度太小看不清),列表拖动开始时会飘到左上角,左上角有奇怪的取消按钮与内容重叠。
dots3-note Preview(DSH)
2026-08-21—32/60
53%
整体表现一般,编程基本不可用。指令遵循陷入死循环翻车,3D赛车完全看不到车;24点、密码锁两道推理题全对。即便有 Deepseek-Harness 加持,整体编程表现依旧拉胯,综合测评结果并不算理想。
模型参数
开发商小红书/dots模型实验室
架构MoE
发布2026-08
总参数280B
激活参数16B (MoE)
上下文窗口512K
多模态文本/图像/音频
输入价格免费
开源开源
Q1强约束指令遵循句子生成
1/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
陷入思考死循环,冬雪覆群山重复出现108次(循环107次),最终token耗尽,失败。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI简陋,计算器UI有问题、终端点不开;太空射击游戏简陋但可玩,不过挂掉后重新开始就僵死。
Q53D赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
完全看不到汽车在哪里,只有一直出现的圆圈,失败。
Q6Trello看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
拖动卡片和列表正常、列表删除正常;但待办卡片不能编辑、填写后无法关闭窗口、删除不工作。
Qwen-3.8-27B(FP8)
2026-08-15—51/60
85%
开源27B FP8量化版实测51分,较Q4版(45分)明显进步。推理全对:Q1句子全部通顺且倒数第二字无重复,Q2/Q3满分。编程题:Q4浏览器OS计算器计算完全错误、点日期跳出设置,太空射击游戏朝向小瑕疵;Q5赛车功能正常、方向无误;Q6 Trello看板UI配色不错功能完整。综合足以胜任日常办公、网页开发等常规编程需求。
模型参数
开发商阿里云/Qwen
架构Dense
发布2026-08
总参数27B
激活参数27B (Dense)
上下文窗口262K(YaRN可外推1M)
多模态文本/图像/视频
输入价格免费(本地部署)
开源开源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
所有句子都是通顺的,且倒数第二字没有重复,修复了Q4版的第6-9句违规问题。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
点日期跳出设置不对;计算器计算完全错误,试了几次没有一次算对;太空射击游戏我方飞机一直向上、敌方从前方来,朝向小瑕疵。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
实现很不错,功能上没有什么问题,左右方向这次没有搞反。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI配色风格还不错,整体功能没有问题,不错。
Qwen-3.8-27B(Q4)
2026-08-15—45/60
75%
开源27B量化(Q4_K_S)模型实测45分。推理题Q2/Q3满分,Q1句子生成总体通顺但第6-9句取巧违反倒数第二字约束。编程题:Q4浏览器OS代码完整但一直开不了机,Q5赛车整体过得去但左右键反转,Q6 Trello看板功能完整。作为27B量化模型实力不俗,非常适合个人及小型企业本地部署。
模型参数
开发商阿里云/Qwen
架构Dense
发布2026-08
总参数27B
激活参数27B (Dense)
上下文窗口262K(YaRN可外推1M)
多模态文本/图像/视频
输入价格免费(本地部署)
开源开源
Q1强约束指令遵循句子生成
7/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
总体比较通顺,但第6、7、8、9句取巧用'6月6/7月7'格式,违反倒数第二个字不能重复的约束。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
3/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
一直开不了机,代码是全的,估计是某个状态搞错,很遗憾。
Q53D赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
实现整体还是过得去的,唯一问题是左右键操作方向相反。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
整体功能没有问题,不错。
GLM 5.3(Claude Code)
2026-08-14—52/60
87%
Claude Code 上测试,推理设置 high、编程拉满 max 思考深度。Q1 第5句不符合结尾规则其余9句通顺得9分,Q2/Q3 推理题正确。Q4 浏览器 OS 除命令行输入框有点突兀外挺不错,太空射击功能UI都OK;Q5 赛车漂亮但左右反转;Q6 Trello 功能没问题但拖动动画较水。综合52分,与 Gemini 3.7 Flash 并列第一。
模型参数
开发商智谱AI
架构MoE
发布2026-08
总参数~130B
激活参数~130B+ (MoE)
上下文窗口1M
多模态文本/图像
输入价格¥0.1/M
开源开源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第五句不符合结尾规则,其余9句通顺。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
命令行输入框有点突兀,其他挺不错;太空射击游戏功能和UI都觉得OK。
Q53D赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
非常漂亮,唯一问题是左右方向反转,按左键往右,按右键往左。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI看上去不错,基本功能没问题。列表拖动换位置时切入的动画比较水,不够精美。
Gemini 3.7 Flash(AI Studio)
2026-08-14—51/60
85%
AI Studio 拉满最高思考深度测试,Q1 指令遵循全部通顺达标(vs DeepSeek V4 Pro/Grok 4.6 均翻车),Q2/Q3 推理题正确,速度飞快。编程题:Q4/Q5/Q6 UI 水但功能均正常可玩,综合实力让眼前一亮。作为 Flash 版本 51 分暂列第一。
模型参数
开发商Google
架构未知
发布2026-08
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格免费
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
速度相当快,句子全部从1到10结尾且通顺。对比 DeepSeek V4 Pro 只对4/5句,Gemini 3.7 Flash 完胜。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
速度杠杠的,UI看上去也很舒服,基本功能没问题。太空射击游戏敌机等 UI 很水,但功能正常。
Q53D赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
UI有点水,但功能能正常跑。比起前面花三四十分钟搞出来的横冲直撞失控滑雪般的玩意儿强很多。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI 不是喜欢的 style,但基本功能没有问题。
DeepSeek V4 Pro(DSH)
2026-08-14—46/60
77%
在 Harness 上复测 DeepSeek V4 Pro,Q1 指令遵循仅对4句(比 Codex 的5句更差),Q2/Q3 推理题正确。Q4 浏览器 OS 计算器崩溃但太空射击比 Codex 好,Q5 赛车像在雪地滑行 BUG 给5分,Q6 Trello 看板 UI 漂亮功能完美拿满分。综合46分,仍不及 Codex 上的表现。
模型参数
开发商DeepSeek
架构MoE
发布2026-08
总参数~2.3T
激活参数~236B (MoE)
上下文窗口1M
多模态文本
输入价格¥3/M
开源开源
Q1强约束指令遵循句子生成
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
只对了4句,豆包也认为只对了4句,比昨天在 Codex 上测还少了一句。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
右上角弹窗不错,计算器 UI 一团糟没法玩,其他还好;太空射击游戏比昨天在 Codex 上的好很多,可玩性大大增加。
Q53D赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
不是在赛车而是在滑车,车在雪地里滑动,马路横跨着一条条滑行,且不控制左右也不会被障碍物挡住,太拉胯了。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI 很漂亮,功能没有问题,非常棒。
Grok 4.6(Cursor)
2026-08-13—41/60
68%
推理题大幅进步:Q1全对(vs 4.5的4分),Q2/Q3满分,推理能力追上主流。但编程题全线崩溃:Q4浏览器OS无法进入直接失败(vs 4.5的2分陷入死循环),Q5赛车左右键反且重启后崩溃(vs 4.5的8分),Q6 Trello看板颜值一般(vs 4.5的7分)。综合41分,与4.5持平,但严重偏科。
模型参数
开发商xAI
架构MoE
发布2026-08-12
总参数~1.5T
激活参数~500B (MoE)
上下文窗口131K
多模态文本/图像
输入价格$2/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
全部没有问题,第九题一开始也以为是错的,去查了下是有这个说法的。相比4.5版本的4分(句子不通顺),进步显著。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
1/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
很可惜,没法进去。失败!比4.5陷入死循环更差,直接完全无法使用。
Q53D赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
第一次运行能玩,虽然不算漂亮,且左右键是反过来的。然后挂了重新来后,就根本不能玩了,整个画面都一团糟了。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
还好,基本功能没有问题。颜值肯定不算高颜值,Trello看板外观普通。
Deepseek V4 Pro(Codex)
2026-08-13—50/60
83%
推理题Q2、Q3全对,Q1强约束指令遵循测试只对5句出乎意料。编程题:Q4浏览器OS右上角弹窗和Dock功能正常但太空射击游戏很一般且键盘无法控制,Q5赛车游戏实现非常棒支持加速和背景音,Q6 Trello看板UI漂亮功能完美。结合极低价格,将对海外头部AI厂商造成更强冲击。
模型参数
开发商DeepSeek
架构MoE
发布2026-08-13
总参数~2.3T
激活参数~236B (MoE)
上下文窗口1M
多模态文本
输入价格¥3/M
开源开源
Q1强约束指令遵循句子生成
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
只有5句符合要求,'数了下,只有5句是符合要求的'。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
右上角弹窗不错,Dock栏功能没什么问题,但太空射击游戏'很一般'且键盘wasd和方向键无法控制,只能用鼠标。
Q53D赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
'这个实现还是非常棒的',可以加速,还有汽车轰鸣声等背景音。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI很漂亮,'功能没有问题,非常棒'。
Qwen 3.8 Max
2026-08-03—54/60
90%
表现非常强,追平Preview版(54分)。推理题Q2、Q3全对,Q1句子生成小有瑕疵(第九句不通顺,第十句'满九'略不自然)。编程题三题整体出色:浏览器OS功能完整、太空射击游戏专业;赛车游戏可玩;Trello看板除待办标题编辑入口缺失外均正常。与Preview版同分,国产大模型巅峰之作。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-08
总参数~2T
激活参数~400B (MoE)
上下文窗口1M
多模态文本/图像/音频
输入价格¥0.1/M
开源闭源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第九句不大通顺;第十句'满九'语法通但少听到这种说法,不够自然,不如加'岁'字。整体9句通顺,1句小瑕疵。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是1 2 7 5 3,答案正确。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI感觉还好,右上角弹窗做得不错,dock栏app正常,太空射击游戏实现看上去很专业,可玩性强。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
视角压得较低,前面路况稍微有点被挡住,但玩下来感觉还是挺不错的。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表和卡片拖动删除正常,仅待办标题编辑入口缺失扣2分。
openpangu 2.0 Flash(MaaS)
2026-08-02—26/60
43%
openpangu 2.0 Flash 数学与逻辑推理准确(24点、密码锁全对),但约束文本输出敷衍、生成稳定性极差:编程任务输出在 4K-8K tokens 处反复截断,浏览器系统、3D赛车、Trello看板均无法生成完整可用代码,代码开发场景不推荐。
模型参数
开发商华为
架构MoE
发布2026-06-30
总参数92B
激活参数6B (MoE)
上下文窗口512K
多模态仅文本
输入价格按Token计费(MaaS免费额度极低)
开源开源
Q1强约束指令遵循句子生成测试
3/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
你拍一我拍二儿童歌?明显在糊弄,但结尾1-10正确
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案正确(1 2 7 5 3)
Q4浏览器内操作系统
1/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
代码没写完就停住,8K tokens处输出截断,叫它继续仍未完成
Q53D 赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
也不行,7K多就断了
Q6Trello 看板
1/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
4K多tokens就断了,更惨,无法生成完整可用代码
openpangu 2.0 Pro(MaaS)
2026-08-02—36/60
60%
OpenPangu 2.0 Pro 数学与逻辑推理扎实(24点、密码锁全对),但指令遵循文本通顺度一般、UI/游戏编程短板突出:计算器逻辑失效、太空射击简陋、3D赛车与Trello无法交互,重度编程体验较差。
模型参数
开发商华为
架构MoE
发布2026-07-31
总参数505B
激活参数18B (MoE)
上下文窗口512K
多模态仅文本
输入价格按Token计费(MaaS免费额度极低)
开源开源
Q1强约束指令遵循句子生成测试
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
句子结尾1-10正确,但7、8、10明显不通顺,9听上去也不顺
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案正确(1 2 7 5 3)
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI一般;计算器点击等于号无反应(逻辑失效);太空射击游戏简陋,飞机为静止方块
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
根本没法玩,不知道它在干嘛
Q6Trello 看板
3/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI接近原生Trello,但完全无法交互,列表无法添加
GPT 5.6 Luna(Codex)
2026-08-01—49/60
82%
推理题三题全对(Q1默认中等深度输出生硬,切换高思考深度后仅第6、8句略差,Q2/Q3正确)。编程题:Q4浏览器OS UI美观弹窗Dock功能正常但太空射击游戏根本没法玩,Q5赛车游戏整体玩起来不错但左右键反向,Q6 Trello看板列表和卡片增删改拖动全功能正常但新增最大化按钮无反应。整体综合性能与DeepSeek V4 Flash正式版不相上下,适合低成本推理、前端开发需求,综合49/60。
模型参数
开发商OpenAI
架构未知
发布2026-07
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像
输入价格$0.2/M
开源闭源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
默认中等思考深度输出语句生硬全不通顺,切换高思考深度后明显改善,仅第6、8句略差。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是12753,答案正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI还挺喜欢,右上角弹窗和Dock栏的app没有什么问题,但太空射击游戏根本没法玩。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
整体玩起来不错,唯一问题是左右键是反的,按下右键车子就往左跑。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表和卡片增删改拖动等都没有问题,比很多模型多了列表和最大化按钮但点击无反应。
DeepSeek V4 Flash(Claude Code)
2026-08-01—50/60
83%
推理题三题全对(Q1对9句,Q2/Q3正确)。编程题:Q4浏览器OS基本功能可用但太空射击游戏简陋不及Codex版,Q5赛车游戏效果不错但耗时44分钟(新模型上线算力拥堵所致),Q6 Trello看板UI清新增删改拖动全功能正常。整体与Codex平台表现相当,发挥稳定,综合50/60。
模型参数
开发商DeepSeek
架构MoE
发布2026-07
总参数~2T
激活参数~236B (MoE)
上下文窗口1M
多模态文本
输入价格¥0.1/M
开源开源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没有问题,就第七句不是很通顺。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是12753,这个也答对了。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
右上角弹窗和Dock栏的app没有什么问题,但太空射击游戏没Codex版做得好,"花了几十分钟做出这样一个破游戏,真的说不过去"。
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
等待44分钟(新模型上线算力拥堵所致),但游戏效果还不错,"对得起等待的这44分钟"。
Q6Trello 看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI比较清新,列表和卡片增删改拖动等都没有问题。
DeepSeek V4 Flash(Codex API)
2026-07-31—47/60
78%
推理题三题全对(Q1对9句,Q2/Q3正确)。编程题:Q4浏览器OS基本功能可用但控件排序错乱和操作失灵,Q5赛车游戏交互效果优秀堪同年同梯队标杆但耗时过长,Q6功能正常但渲染竖线干扰明显。整体和Codex适配存在磨合缺陷,长代码生成耗时严重降低开发效率。
模型参数
开发商DeepSeek
架构MoE
发布2026-07
总参数~2T
激活参数~236B (MoE)
上下文窗口1M
多模态文本
输入价格¥0.1/M
开源开源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没有问题,第九题有点小问题,其他还好。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,思考了1分半钟。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是12753,答案正确。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
桌面系统存在控件排序、操作失灵问题,看板界面渲染异常竖线干扰但基础功能可用。
Q53D赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
3D赛车成品交互效果优秀堪同年同梯队标杆,但单次耗时动辄半小时且频繁断链重连。
Q6Trello看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
功能没有问题,但渲染异常竖线干扰,评价'一根根竖线吓死宝宝了'。
Agnes 2.5 Flash
2026-07-29—29/60
48%
推理题开启深度思考后表现尚可(24点和密码锁正确),但编程题全线崩溃。浏览器OS多项功能失效(计算器不能用、Dock应用顺序错乱),3D赛车未渲染出赛车,Trello看板无法创建列表。胜在零成本,适合搭配OpenClaw等智能体做文案、资料查询类轻量任务,不适合专业编程生产。
模型参数
开发商Agnes AI(SG)
架构未知
发布2026-07
总参数未知
激活参数未知
上下文窗口512K
多模态文本/图像
输入价格免费
开源闭源
Q1强约束指令遵循句子生成
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
默认模式全错(结尾不是1到10),开启深度思考(high)后格式正确,但生成的所有句子均不通顺。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,速度较快。
Q3密码锁推理题
8/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确推理出密码12753。
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI一般,右上角icon弹窗正常;但Dock栏后打开应用藏在前打开后面、计算器不能用;太空射击游戏过于简陋但基本功能可运行。
Q53D赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
赛车未出现,仅公里数数字跳动,无法游玩,完全失败。
Q6Trello看板
2/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI与原生Trello接近,但连最基本的列表都无法创建,核心功能缺失。
蚂蚁百灵 Ling 3.0 Flash
2026-07-28—19/60
32%
整体表现非常糟糕,6道题中仅24点问题做对,其余全线崩溃。指令遵循句子不通顺且未按要求以1-10结尾;密码锁推理答错;编程题三题均有严重问题:太空射击游戏无法操作、3D赛车根本没渲染出来、Trello看板只能新增无法修改删除且拖动错位。对比同价位 DeepSeek V4 Flash 完全没有竞争力。
模型参数
开发商蚂蚁集团/InclusionAI
架构MoE
发布2026-07-24
总参数124B
激活参数5.1B (MoE)
上下文窗口256K
多模态仅文本
输入价格免费
开源开源
Q1强约束指令遵循句子生成
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
句子不全都是从1到10结尾,且句子完全是狗屁不通,评价'举一反二、横七竖七都造得出来,很糟糕'。
Q224点问题
7/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,但思考了4分多钟,速度偏慢。
Q3密码锁推理题
2/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案错了,正确答案是12753。
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI看上去一般,基本功能没有问题;但太空射击游戏根本不能玩,鼠标左右移动没有半点反应。
Q53D赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
赛车没有出现,完全没有渲染出来,评价'幽灵赛车用精神意志在赛车吗?太烂了'。
Q6Trello看板
3/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI和原生Trello比较接近,列表和待办卡片增加没有问题;但都无法修改,拖动后卡片一并拖动、待办跑其他列,卡片和列表删除也不工作。
Claude Opus 5(中转站版)
2026-07-26—43/60
72%
通过中转站渠道测试,结果仅供参考。推理题:Q1句子生成全部通顺无取巧满分通过,Q3密码锁推理正确。但Q2 24点违规用了阶乘、Q4太空射击游戏体验差(飞机无立体感、子弹自动连发)、Q5赛车根本没渲染出来。综合表现远达不到 Opus 5 应有水准,但怀疑是中转站环境问题。
模型参数
开发商Anthropic
架构未知
发布2026-07-24
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格$5/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
全部句子读起来通顺,且没有取巧的情况,完美通过。
Q224点问题
6/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,但违规用了阶乘,提示词明确要求初等数学运算符,指令遵循有问题。给半对略高。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI一般,基本功能没问题。但太空射击游戏飞机太大无立体感,且子弹不需要按space就自动连发,实现有瑕疵。
Q53D赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
赛车没有出现,完全失败。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
这是唯一一个没有任何问题的实现,列表和待办卡片增删改均正常,列表和卡片拖动也没有问题。
Gemini 3.6 Flash(Extended Thinking)
2026-07-22—44/60
73%
开启Extended Thinking后推理能力大幅提升,Q1/Q2/Q3全部正确(Q3密码锁推理比非ET版本有进步),但编程能力反而下滑:Q4浏览器OS耗时十多分钟首次拒绝输出代码,Q5赛车游戏直接触发代码报错无法启动,Q6 Trello看板基本功能正常但重置按钮有逻辑bug。Extended Thinking擅长多层逻辑推导却容易过度发散打乱代码逻辑,出现明显'过度思考'副作用。
模型参数
开发商Google
架构未知
发布2026-07
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格免费
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
Perfect!全部句子都没有问题。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,和非ET版本做法一样。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
这次它推理出来了,Extended Thinking果然不一样,答案正确12753。(非ET版本该题答案错误72781)
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
等了十多二十分钟一直加载中,刷新无效;首次要求输出HTML代码时直接拒绝称只能处理文本;重开后基本功能OK但右上角图标无弹窗;太空射击游戏是最简陋的实现,长按space再按方向键子弹打不出来。
Q53D赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
点击开始按钮没有任何反应,打开调试模式有错误,无法启动。代码报错无法运行。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
基本功能(卡片增删改拖动)均正常,UI一般。重置示例数据按钮存在逻辑bug,点击后变成两个列表而非三个,但多点击几次又好了。
Gemini 3.6 Flash
2026-07-22—37/60
62%
整体测评下来,虽然说是flash版本,但还是多少有点失望。大家都说Gemini现在是北美版豆包,估计都跑去满足用户情绪价值去了。推理题:Q1句子8和9不流畅扣分,Q2 24点正确,Q3密码锁推理给出错误答案。编程题:Q4浏览器OS基本功能OK但太空射击游戏最简陋,Q5赛车游戏左右键反向是明显bug,Q6 Trello看板功能正常但UI一般。
模型参数
开发商Google
架构未知
发布2026-07
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格免费
开源闭源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没问题,但第8句结尾'有'不够通顺,第9句凭直觉觉得不顺畅。整体通过但流畅度有瑕疵。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
0/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确答案应该是12753,它算出来是72781,答案错误。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI不错,基本功能没有问题。但内置的太空射击游戏可能是实现的最简陋的太空射击游戏了,就几个三角形代表飞机,不过功能没问题。
Q53D赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
整体还好,但唯一问题是左右键是反的,按左键车子会往右开,按右键车子会往左开,是一个明显的bug。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
整个UI感觉一般,但所有功能没有问题,待办卡片增删改拖动均正常。
Qwen 3.8 Max Preview
2026-07-19—54/60
90%
整体表现非常出色,速度明显比Kimi K3快很多。第一题指令遵循全对实属罕见,编程题也无大毛病。赛车有可玩性但未达惊艳,Trello待办删除功能缺失。相比Kimi K3(第一题错两句、赛车无法控制),更好用。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-07
总参数~2T
激活参数~400B (MoE)
上下文窗口1M
多模态文本/图像/音频
输入价格¥0.1/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
完美生成10个句子,严格遵循汉字数字结尾、倒数第二字不重复且不为'第''是''为'的约束。用户评价'好久没有看到有模型把这题做到全对的了'。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
正确给出 10+9+3+√4=24 的解法,速度很快。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确答案 12753,推理正确。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
速度确实快,界面美观。WiFi弹窗正常,Dock应用可正常打开,太空射击游戏UI不错且无功能性问题。扣1分因为并非所有细节都完美。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
玩起来感觉不错,没有看到明显错误。相比Kimi K3(车子一直往右拐无法控制)好很多。扣2分因为体验上未达惊艳。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI与原生Trello几乎一模一样,列表和卡片增删改正常,列表和卡片拖拽功能正常。扣3分因为待办的删除找不到入口(核心功能缺失),列表删除没有问题。
Inkling
2026-07-18—35/60
58%
整体表现不太理想,尤其是编程题问题严重。第一题指令遵循仅第一句勉强合格;赛车游戏无法控制、倒着开;Trello看板连添加列表的功能都没有。推理题倒是都做对了。穆拉蒂的新模型还有很长的路要走。
模型参数
开发商Thinking Machines Lab
架构MoE
发布2026-07
总参数975B
激活参数41B (MoE)
上下文窗口1M
多模态文本/图像/音频/视频
输入价格免费(API)
开源开源
Q1强约束指令遵循句子生成
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
仅第一句勉强说得过去,其余9句质量不达标。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确答案 12753,推理正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
基本功能没问题,但内置的太空射击游戏左右上下无法移动,发射子弹也断断续续,体验较差。
Q53D赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
根本控制不了,且感觉车是倒着开的,完全无法正常游玩。
Q6Trello看板
2/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
连添加列表的地方都没有,核心功能缺失,失败。
Kimi K3
2026-07-17—45/60
75%
整体感觉还不错,推理题全部正确,24点还给出了两种解法。最大的槽点是慢,每道题都要花很长时间。编程题中赛车完全无法控制,Trello交互有小瑕疵。如果速度能提升就完美了。
模型参数
开发商月之暗面/Moonshot
架构MoE
发布2026-07-17
总参数2.8T
激活参数~200B+ (MoE)
上下文窗口1M
多模态文本/图像
输入价格$3/M
开源开源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第4和第8句未以汉字数字结尾,其余8句正常通顺。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
思考时间较长(五分多钟),但最终给出了两个解法且都正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确,写了Python脚本辅助推理。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
基本功能没问题,但耗时15分钟以上;太空射击游戏敌机做得太敷衍,与耗时不成正比。
Q53D赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
根本控制不了,开局汽车就侧着往右边拐,按左键毫无反应。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表和卡片增删改及拖拽功能正常。扣3分:①待办编辑时输入框高度太窄看不清标题;②列表拖动时卡片不是跟随移动而是先占位后跳转,不够顺滑。
KAT-Coder-Pro V2.5
2026-07-12—28/60
47%
整体表现不太行。24点陷入死循环5分钟无响应;赛车无法控制;Trello看板连添加列表的功能都没有。推理题正确但编程后两道全线崩溃。
模型参数
开发商快手/KwaiKAT
架构MoE
发布2026-07-10
总参数未知
激活参数未知
上下文窗口256K
多模态仅文本
输入价格$0.74/M
开源闭源
Q1强约束指令遵循句子生成
7/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
对了7句,第3句不通顺,第5句未以汉字数字结尾,第10句也不行。
Q224点问题
0/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
陷入思考死循环,等了快5分钟没有半点反应,只好停止。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
右上角弹窗做得不咋地,Dock基本功能没问题。太空射击游戏一波太多敌机,不可能打得过,游戏设计有问题。
Q53D赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
根本控制不了,开局汽车就侧着往右边拐,按左键根本没有用。
Q6Trello看板
2/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
界面和原生trello很接近,但连添加列表的地方都没有,核心功能缺失,失败。
MiMo V2.5 UltraSpeed
2026-07-12—27/60
45%
速度确实无敌(1000 tokens/s),但推理能力惨不忍睹。24点答案明显错误,密码锁推理也错了。编程题在opencode加持下表现尚可,太空游戏做得不错。速度很快但准确率堪忧。
模型参数
开发商小米
架构MoE
发布2026-06-09
总参数1T
激活参数未知
上下文窗口1M
多模态文本/图像/音频/视频
输入价格免费
开源开源
Q1强约束指令遵循句子生成
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
对了6句。第1、5句未以汉字数字结尾,第8、10句不通顺。速度飞快。
Q224点问题
0/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案明显错误,1.5乘以3会等于24不通。
Q3密码锁推理题
0/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
速度很快但答案错了。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
右上角WiFi点击没有弹窗,Dock栏基本功能ok。太空射击游戏实现让人相当满意。
Q53D赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
像模像样,整体还可接受。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
卡片和列表增删改拖动都正常。扣3分因为拖动没有平滑动画效果,与提示词要求不符。
GPT-5.6 Terra
2026-07-10—43/60
72%
整体感觉一般般,开了极高推理也未有惊艳表现。24点违规用了阶乘被扣分;指令遵循句子偏门不通用;太空飞机不能上下移动。
模型参数
开发商OpenAI
架构未知
发布2026-07
总参数未知
激活参数未知
上下文窗口1.5M
多模态文本/图像/音频/视频
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
7/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第一句不是汉字数字结尾,但后面9句技术上符合,只是内容偏门不够通用。
Q224点问题
5/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
结果正确但解法用了阶乘,题目限定初等数学运算符。给半对。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI还好,基本功能没问题。但太空游戏飞机不能上下移动、子弹不从飞机发射,实现很一般。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
当地感十足,感觉还不错。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
大部分功能没问题,任务和列表拖动正常。扣3分因为点击列表右上角3个点直接删除而非弹出菜单。
GPT-5.6 Sol
2026-07-10—56/60
93%
整体表现不错但未达预期惊艳。第一题虽全对但想法单一取巧;第四题第一次理解成设计原型图需重跑,计算器和终端有小bug。
模型参数
开发商OpenAI
架构未知
发布2026-07
总参数未知
激活参数未知
上下文窗口1.5M
多模态文本/图像/音频/视频
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
除第7句外都按1-10结尾,满足约束条件。写法虽取巧但未违规,只是想法单一。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案 12753 正确。
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
虽第一次理解成设计原型图需重跑,但UI漂亮弹窗正常。计算器结果被遮挡和终端无法输入扣分。
Q53D赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
感觉还不错。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
功能全部正常,任务和列表拖动没有问题。
Grok 4.5
2026-07-09—41/60
68%
整体能力是有的,但第一道推理题让人大跌眼镜,第一道编程题的死循环也让人心有余悸。如果作为生产力工具需要三思而后行。
模型参数
开发商xAI
架构MoE
发布2026-07-09
总参数~1.5T
激活参数~500B (MoE)
上下文窗口131K
多模态文本/图像
输入价格$2/M
开源闭源
Q1强约束指令遵循句子生成
4/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
所有句子除了最后一句其他都不通顺。海外模型用中文称天才。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
最终答案正确,给出了两个解法都没问题。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
2/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
陷入思考死循环,20多分钟出弱智结果,被迫停掉。确认不是网络问题。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
没有进入死循环,很快出结果,整体感觉挺不错。
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI接近原生,列表和卡片增删改及拖动正常,但修改任务卡片标签没生效。
混元HY3(Workbuddy)
2026-07-08—49/60
82%
Workbuddy上跑的HY3效果相当棒,UI比之前测评都好太多,但赛车障碍物问题明显。Workbuddy这个harness加持有明显加成。
模型参数
开发商腾讯
架构MoE
发布2026-07
总参数~300B
激活参数~200B+
上下文窗口256K
多模态文本/图像
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
Workbench误判敏感信息阻断测试,同一提示词在元宝和aistudio都没问题,是Workbench平台问题非模型问题。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI非常漂亮,比前两个测评都好太多,基本功能没问题,太空射击游戏相当不错。
Q53D赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
障碍物总占据整条路,无法闪躲。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI和Trial几乎一模一样,增删改拖动全部正常,完美。
混元HY3(AI Studio)
2026-07-08—48/60
80%
与元宝网页版差异巨大,推理题全对。编程比元宝稍好,但命令行终端无法输入、太慢游戏方向过于灵敏、Trello新增列表无反应。
模型参数
开发商腾讯
架构MoE
发布2026-07
总参数~300B
激活参数~200B+
上下文窗口256K
多模态文本/图像
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10,句子通顺。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
比元宝好很多,但计算器删除按钮太突出、命令行终端无法输入、太空游戏UI不行方向过于灵敏。
Q53D赛车游戏
6/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
虽说简陋但是可玩。
Q6Trello看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI好多了,但新增列表没反应无法增加;卡片增删改拖动正常,已有列表删除正常。
混元HY3
2026-07-06—30/60
50%
推理题几乎全军覆没,编程也只能差强人意。这个模型真心不咋地。
模型参数
开发商腾讯
架构MoE
发布2026-07
总参数~300B
激活参数~200B+
上下文窗口256K
多模态文本/图像
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
给了两个回答,右边全错;左边只有第一句通顺,其余失败。
Q224点问题
2/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案违规,9用了两次,不符合每个数字只能且必须使用一次的规则。
Q3密码锁推理题
2/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
推理半天答案是26751,错误。正确答案是12753。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面一般,计算器占太长栏;主题开关形同虚设;太空游戏没看到敌人只看到障碍物;WiFi弹窗正常。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
还像模像样。
Q6Trello看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI丑陋,深色背景配灰色字体难以辨认;修改列表名称点击无反应(两次),删除列表也无法;但卡片增删改拖动正常。
Deepseek V4 Flash(本地部署)
2026-07-03—12/60
20%
本地部署版Deepseek V4 Flash表现不佳,推理题几乎全军覆没,编程题问题也很多。
模型参数
开发商DeepSeek
架构Dense(Distilled)
发布2026-07
总参数~30B
激活参数~30B (Distilled)
上下文窗口128K
多模态文本
输入价格免费(本地)
开源开源
Q1强约束指令遵循句子生成
0/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
陷入死循环,一直没有出结果,最后停止。
Q224点问题
0/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
长时间没有算出,安东尼只好停了。
Q3密码锁推理题
0/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案26157错误,正确答案是12753。
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
APP打开没问题,但太空射击游戏一片漆黑根本跑不了。
Q53D赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
没看到障碍物,前面晃动的是卡车。
Q6Trello看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
卡片拖动/新增正常,但编辑不了列表,拖动换位置不确定是否OK。
Claude Fable 5
2026-07-02—57/60
95%
推理题完美通过,编程题表现出色。Fable 5确实能打,比Sonnet 5好太多,贵也是理所应当。
模型参数
开发商Anthropic
架构未知
发布2026-07
总参数~640B
激活参数~200B+
上下文窗口200K
多模态文本/图像/音频/视频
输入价格$10/M
开源闭源
Q1强约束指令遵循句子生成
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没问题,语义全部通顺,完美。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
给出了一个解法,答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
9/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面还可以,基本功能没问题,太空射击游戏效果不错。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
其他还好,但道路画线斜着指向建筑物,不转弯时也这样。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI不错,基本功能和拖动都没问题,完美。
Claude Sonnet 5
2026-07-01—44/60
73%
Sonnet 5水平没有预想中高,特别是编程方面。推理题表现尚可,但赛车游戏上下颠倒太影响体验。
模型参数
开发商Anthropic
架构未知
发布2026-07
总参数~640B
激活参数~200B+
上下文窗口200K
多模态文本/图像/音频/视频
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
6/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没问题,但4/5/6/7句不通顺,1,2,3,8,9,10正常。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
最终答案正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确,速度很快。
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
基本功能没问题,太空游戏键盘控制小范围移动,鼠标稍好。
Q53D赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
上下颠倒需旋转180度,玩起来眩晕。
Q6Trello看板
8/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI还行,列表和待办增删改拖动都没问题。
Deepseek V4 Pro(新架构)
2026-06-30—43/60
72%
新架构的Deepseek V4 Pro编程能力似乎没有之前测评好,浏览器OS基本功能失败,赛车和Trello也只是差强人意。
模型参数
开发商DeepSeek
架构MoE
发布2026-06
总参数~2.3T
激活参数~236B (MoE)
上下文窗口1M
多模态文本
输入价格¥3/M
开源开源
Q1强约束指令遵循句子生成
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
除了第5句,其他句子结尾1-10都正确且通顺。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
最终答案正确,给出几个解法都没问题。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
3/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
右上角点击没有弹窗,Dock栏点击没有反应,失败。
Q53D赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
UI不大行,玩起来不是很顺畅。
Q6Trello看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI不算高颜值,拖动没问题,但任务没法修改。
Longcat 2.0
2026-06-30—14/60
23%
这个模型我真心觉得不咋地,网上都在吹Benchmark但实际测试结果很差。编程题几乎全线失败,速度也很慢。
模型参数
开发商美团
架构MoE
发布2026-06
总参数1.6T
激活参数~48B (MoE)
上下文窗口1M
多模态文本
输入价格免费
开源开源
Q1强约束指令遵循句子生成
3/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没问题,但只有1和3句通顺,其余取巧或不通顺。
Q224点问题
0/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
等了十多分钟没有输出,挂了。
Q3密码锁推理题
6/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确,但花了10多分钟,速度很慢。
Q4浏览器内操作系统
2/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面一般,基本功能完全不工作,右上角弹窗和Dock栏APP都没反应。
Q53D赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
车子倒着开,左右控制反向,完全不符合预期。
Q6Trello看板
2/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI一般,新增列表不工作,卡片内容无法修改,可以拖卡片但不能拖列表,删除也有问题。
Nex N2 Pro
2026-06-19—48/60
80%
这个模型真心觉得还不错,比起某Max那些大牌模型的测评报告,已经相当能打了。如果编程的UI方面能做得更好那就完美了。
模型参数
开发商Nex-AGI
架构MoE
发布2026-06
总参数397B
激活参数未知
上下文窗口未知
多模态文本
输入价格未知
开源开源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾1-10没问题,有一句语义感觉不太对。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
给出了一个解法,正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
6/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面一般,基本功能没问题,太空射击不流畅一闪一闪,子弹发射也不流畅。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
感觉还不错,只是车技有点菜。
Q6Trello看板
6/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI一般,其他还好,但任务卡片拖动不工作。
Kimi K2.7 Code
2026-06-15—40/60
67%
这个模型真心觉得不稳定。PA Agent和Cloud Code两个Agent都出问题,只能怀疑是模型本身的问题。
模型参数
开发商月之暗面/Moonshot
架构MoE
发布2026-06-15
总参数~600B
激活参数~200B+ (MoE)
上下文窗口200K
多模态文本/图像
输入价格未知
开源闭源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
1-10结尾满足,后面几句还算满足,其他的不行。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
给出了一个解法,正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面还可以,基本功能没问题,太空射击根本没法玩。
Q53D赛车游戏
5/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
模型变得temporarily unavailable不稳定,readme文档,感觉实现还好。
Q6Trello看板
2/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
一直在重试,屡次没法往下走,反复读了好多次都这样。
GLM 5.2
2026-06-13—50/60
83%
如果浏览器实现能通过就完美了。编程题用一次过的标准来看,WiFi弹窗和Dock栏点击是明显的功能缺失。Trello看板非常漂亮。
模型参数
开发商智谱AI
架构MoE
发布2026-06-13
总参数~130B
激活参数~130B+
上下文窗口1M
多模态文本/图像
输入价格¥0.1/M
开源开源
Q1强约束指令遵循句子生成
8/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
第8句有问题,修改后整个句子不通顺,算错了一句。
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
给出一个解法,正确。
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案12753正确。
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面精美但WiFi弹窗、Dock栏点击、太空射击全部失败,功能不可用。
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
花了10分钟,不错不错。
Q6Trello看板
10/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
界面非常漂亮,增删改拖动都没问题,完美。
新程Alpha
2026-06-12—25/60
42%
号称对标GPT-5.4的认知大模型,实测翻车。Q1句子指令完全失败,Q2理解题意出错(误用阶乘),Q3密码锁推理正确。编程题三题几乎全军覆没:浏览器OS无功能正常,3D游戏完全不工作,Trello看板仅增删改基本正常但拖动和删除UI有bug。总分25/60,低于预期较大。
模型参数
开发商未知
架构未知
发布未知
总参数未知
激活参数未知
上下文窗口未知
多模态文本
输入价格未知
开源闭源
Q1强约束指令遵循句子生成测试
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
最基本的结尾要从1到10的要求都不对,更别说句子是否有意义了,失败出师不利
Q224点问题
6/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案24正确,但提示词明确要求初等数学运算符,新程Alpha用了阶乘,审题理解出错
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是12753,好这题做对了
Q4浏览器内操作系统
1/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI看上去一般,玩下基本功能吧,没有一个功能是正常的,失败
Q53D 赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
根本不工作啊,我的天啊
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表和代办卡片增加修改没有问题;拖动任务卡片时动画有问题,卡片没有跟随鼠标互动;删除任务卡片失败,感觉删掉了但界面没有更新
Qwen3.6 27B
2026-06-07—33/60
55%
推理题表现还行(Q2、Q3全对),但编程题三题均有明显问题:浏览器OS基本功能全废,3D游戏左右键反了且看不清,Trello看板增删改拖均有bug。综合33/60,编程能力明显短板。
模型参数
开发商阿里云/Qwen
架构Dense
发布2026-06-07
总参数27B
激活参数27B (Dense)
上下文窗口32K
多模态文本
输入价格免费
开源开源
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾确实是1-10,前面4句还算通顺,但是剩下的就不行了
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
竟然提供了4种解法,看了下都是对的,不错
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是12753,答案正确,不错哦
Q4浏览器内操作系统
2/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
计算器根本不能输入,太空射击游戏根本没有办法开启,游戏失败
Q53D 赛车游戏
3/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
根本看不清,左右键搞反了,按左箭头车往右移,按右键反而左移了
Q6Trello 看板
3/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
配色一般;修改名称怎么修改不了;拖动时灵时不灵,拖动后列表下面的卡片不知道丢哪去了
Gemma 4 31B
2026-06-05—40/60
67%
推理题表现不错(Q2、Q3全对),Q1句子结尾正确但流畅度一般。编程题:浏览器OS背景图加载失败+射击游戏失效扣分较多,3D赛车游戏无具体批评给7分,Trello看板增删改均有明显问题。综合40/60,中等偏上。
模型参数
开发商Google
架构Dense
发布2026-06-05
总参数31B
激活参数31B (Dense)
上下文窗口32K
多模态文本/图像
输入价格免费
开源开源
Q1强约束指令遵循句子生成测试
5/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾确实是1-10,前面几个肯定是不通顺的,后面你说算他错吧又感觉有时又能这样说
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
提供了两种解法,第一种和第二种(10-√4=8/9除以3=8/3×3=24)都没有问题,都是正确的,不错
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案应该是12753,答案正确,不错啊
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
背景一片白色,桌面图片没有正常加载;基本功能没问题,但太空射击游戏按空格没有任何子弹发射,也不像个射击游戏
Q53D 赛车游戏
7/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
还不错吧(无具体批评内容,描述简短正面)
Q6Trello 看板
4/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
配色和原生Trello接近;没有增加列表按钮;列表名称可修改但代办没有办法修改;卡片拖动时灵时不灵;列表拖动没有动画效果
Agnes AI
2026-06-04—29/60
48%
Q2、Q4表现不错,但Q1句子生成失败、Q3服务器错误直接失败。3D赛车三个问题扣分多,Trello看板基本功能OK但卡片修改和动画有瑕疵。最重要是免费,综合29/60。
模型参数
开发商Agnes AI(SG)
架构未知
发布2026-06
总参数未知
激活参数未知
上下文窗口1M
多模态文本/图像/视频
输入价格免费
开源闭源
Q1强约束指令遵循句子生成测试
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
这个深层明显不行,最后应该是1-10结尾的
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,速度也还挺快的
Q3密码锁推理题
0/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
竟然报了个服务器错误,重新来吧卡在这里不动了,测试失败
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
桌面配色看上去还不错,基本功能还好,太空射击游戏还不错哦(近期少有模型实现出来的)
Q53D 赛车游戏
4/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
视角太飘忽,没法控制加速,跑着跑着看不到路和障碍物了
Q6Trello 看板
5/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表增删改没问题,卡片跨列表拖动没问题;但任务卡片不能修改,列表拖动动画实现的不好
Minimax M3 API
2026-06-03—31/60
52%
API+Pi agent模式下,比直接官网测试强(Q4写出代码),但整体表现仍然一般。Q1句子生成较差,Q5长任务编程直接卡死无输出,Trello看板基本功能有多处缺失。速度慢是明显短板,综合31/60。
模型参数
开发商MiniMax
架构MoE
发布2026-06-01
总参数2.3T
激活参数~98B (MoE)
上下文窗口1M
多模态文本/图像/音频/视频
输入价格未知
开源开源
Q1强约束指令遵循句子生成测试
3/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾是1-10,但只有前面两句语意通顺,第三句勉强,其他都不行
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
用时15-20分钟差点放弃,最终答案正确,解法正确,没有问题
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案正确,且没有走常规推理路径,而是自己写Python代码来做,速度很快,整个推理过程没有问题
Q4浏览器内操作系统
4/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
起码写出了代码(比官网强),但弹窗卡片超出边界,计算器布局有问题,太空射击游戏空格键不发射,键盘无法控制只能鼠标
Q53D 赛车游戏
0/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
静止快10分钟无任何输出和TOKEN变化,估计也是停下来了,和官网测试同样问题,长时间编程任务能力有严重问题
Q6Trello 看板
4/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
UI挺不错,列表增删改没问题;但任务卡片无法编辑,每次点击打开空全局模态弹窗;拖动需精确位置;卡片无删除入口
DeepSeek V4 Flash
2026-06-02—38/60
63%
推理题三题全对(Q1对9句,Q2、Q3全对且速度快)。编程题三题均有明显问题:Q4基本功能OK但射击游戏挂起,Q5完全失败,Q6 Trello看板多处问题。Flash轻量版速度有优势但编程能力一般,综合38/60。
模型参数
开发商DeepSeek
架构Dense(Distilled)
发布2026-06-02
总参数~30B
激活参数~30B (Distilled)
上下文窗口128K
多模态文本
输入价格¥0.1/M
开源开源
Q1强约束指令遵循句子生成测试
9/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾都是按照1-10结尾的,语义只有出门必逢七有争议,所以认为对了9句
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
给出了一种解法,答案正确,速度也挺快
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确答案是12753,答案正确,推理过程也挺快,不像其他模型半小时搞不定
Q4浏览器内操作系统
5/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
界面感觉一般般,基本功能没有问题;但太空射击游戏跑几秒钟就自动挂起,不知道什么原因
Q53D 赛车游戏
1/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
车卡在围栏里,无法前进后退,障碍物从后方出来,完全是个失败的实现
Q6Trello 看板
3/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
任务卡片无法编辑(点击无反应),拖动动画有问题(应往下滚但没滚),列表拖动屏幕闪烁,原位置列表消失
Qwen 3.7 Plus
2026-06-02—54/60
90%
表现非常强!Q1、Q2、Q3推理题全对,Q2还给出了测评以来最巧妙的解法。编程题:Q4基本OK小瑕疵,Q5赛车游戏非常流畅,Q6 Trello看板基本功能完善仅有一个拖动残留bug。综合54/60,是目前测评过的最强模型之一。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-06-02
总参数~400B
激活参数~72B (MoE)
上下文窗口128K
多模态文本/图像
输入价格¥0.1/M
开源闭源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
所有的句子都没有问题,结尾都是从1到10,很棒
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
给出了三个解,第一个很巧妙是正确的,比DeepSeek V4 Pro做得好,应该是当前测评过的最好的一个模型
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
答案正确是12,753,推理过程检验后都是对的,不像MiniMax M3和DeepSeek V4 Pro那样答案正确但推理过程有问题
Q4浏览器内操作系统
8/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
UI感觉一般,功能没有什么问题,太空射击游戏有个小问题(为什么这些石头打不烂呢)
Q53D 赛车游戏
9/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
玩的有点停不下来了,挺不错的
Q6Trello 看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表增删改没有问题,但任务卡片拖动到第二个列表之后,如果这个列表的位置改了,拖动过去的任务卡片会残留,其他的感觉还好
Step 3.7 Flash
2026-06-02—12/60
20%
表现很差。Q1句子生成完全失败(结尾数字无意义),Q2推理正确但速度慢,Q3直接超时放弃。编程题付费平台等待1小时以上仍未完成,直接中断测试。付费模式性价比极差,不推荐。
模型参数
开发商阶跃星辰/StepFun
架构MoE
发布2026-06-02
总参数~30B
激活参数~30B
上下文窗口256K
多模态文本/图像
输入价格未知
开源闭源
Q1强约束指令遵循句子生成测试
2/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
结尾是从1到10,但这1到10在每个句子中都是没有任何意义的,也就是说这个测试是失败的
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案非常棒,竟然给出了两个解法,且都是正确的,不错不错
Q3密码锁推理题
0/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
耗时太长了,快半个小时都做不完这么一道推理题,直接停掉算错
Q4浏览器内操作系统
0/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
等了1个多小时还没写完,付费平台凌晨都这么慢,直接放弃
Q53D 赛车游戏
0/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
未测试(Q4超时放弃后未继续)
Q6Trello 看板
0/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
未测试(Q4超时放弃后未继续)
Deepseek V4 Pro
2026-06-01—52/60
87%
可圈可点。推理题全对(Q1全对10句,Q2/Q3正确),编程题中浏览器OS基本功能OK但太空射击游戏失效扣分,赛车游戏感觉不错,Trello看板基本功能正常但卡片无法编辑删除。综合52/60,建议作为后续测评的基准对比。
模型参数
开发商DeepSeek
架构MoE
发布2026-06-01
总参数~2.3T
激活参数~236B (MoE)
上下文窗口1M
多模态文本
输入价格¥3/M
开源开源
Q1强约束指令遵循句子生成测试
10/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
最后句子结尾确实是1-10,且每一个句子最后的数字在句子中都是有着通顺的语义的,不像mini Max m three虽然是1-10结尾但是是硬塞进去没有任何语义的
Q224点问题
10/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
答案正确,不错不错
Q3密码锁推理题
10/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确答案应该是12753,答案正确。推理其实是对的,只是给推理表格时把命中列和位置正确列搞混了
Q4浏览器内操作系统
7/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
这几个功能还好,但内置的太空射击游戏根本没法玩,看不清楚
Q53D赛车游戏
8/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
感觉不错,只是我的车技太烂或者说难度有点高,过不了多久就挂了
Q6Trello看板
7/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
列表拖动和增删改没有问题,但任务卡片不能编辑也不能删除
MiniMax M3
2026-06-01—8/60
13%
全军覆没。推理题:Q1句子数字硬塞无意义,Q2公式明显错误(4=2),Q3答案蒙对但推理过程漏洞百出。编程题:Q4卡死无响应,Q5写了SPEC就停住,后续Q6无法测试。作者怀疑M3是否出来太过匆忙未调优就上架。
模型参数
开发商MiniMax
架构MoE
发布2026-06-01
总参数2.3T
激活参数~98B (MoE)
上下文窗口1M
多模态文本/图像/音频/视频
输入价格未知
开源开源
Q1强约束指令遵循句子生成测试
3/10
输出10个以汉字数字结尾的句子,且按照顺序一到十,语句要通顺有意义,且倒数第二个字不能重复且不能是"第","是","为"
最后确实是1-10结尾,但要求语义通顺的约束没有达到,10个句子没有一个最后的数字是有意义的,根本是狗屁不通
Q224点问题
0/10
请用 3、4、9、10 这四个数字,每个数字只能且必须使用一次。你可以使用任何初等数学运算符(包括乘方/根号),请拼出 24 点。
这个就更离谱了,4=2是火星的数学吗,公式明显算不出24
Q3密码锁推理题
5/10
有把五位数密码锁,数字顺序与位置均需匹配才能开锁。78635 含 3 个正确数字且位置全错;16384、56483 各 1 个数字位置正确、1 个数字位置错误;92741 有 2 个数字位置正确、1 个数字位置错误;67153 有 2 个数字位置正确、2 个数字位置错误,据此推理密码。
正确答案应该是12753,答案正确。但推理过程是蒙的(答案无数字8却列出了8,推理漏洞百出)
Q4浏览器内操作系统
0/10
参考macOS最新操作系统,创建一个现代、有着精美桌面和UI的浏览器内操作系统(命名为"AISniper OS")。要求包含系统状态弹窗(如 Wi-Fi、系统健康度)、时钟、底部快捷栏、主题切换功能,并内置可交互的 3D 太空射击游戏,底部快捷栏应该有Finder,计算器,设置、命令行终端和太空射击游戏
e怎么不动了,死掉了吗,叫它继续但它竟然不继续跑了
Q53D赛车游戏
0/10
使用 HTML、CSS 和 JavaScript,创建一个以汽车为主角的 3D 赛伯朋克风格无限跑酷游戏。网页必须通过 Canvas 或 Three.js 渲染出一条沿纵深无限延伸的赛道,核心交互要求实现摄像机视角随着弯曲赛道实时左右平滑晃动的追踪动效,以及汽车切换赛道时的高灵敏度物理避障反馈;赛道上必须动态刷新各种障碍物,且页面顶部需内置一个能随着行驶距离和避障表现实时渲染、不被遮挡的高清动态计分板。
写了个SPEC然后就没有然后了,完全没有输出
Q6Trello看板
0/10
请用单文件原生 HTML/CSS/JS 实现一个高颜值 Trello 看板(严禁任何第三方库),完美支持卡片跨列拖动到其他列表,支持列表横向拖拽切换列表位置,列表和卡片的增删改,且必须硬性实现:拖拽时周围卡片平滑滑开让位的顺畅动画(绝不能生硬闪现)、拖拽到边缘时看板自适应自动滚动、点击卡片时从原位置原位放大展开的无缝弹窗,以及弹窗内完整的子任务清单与多颜色标签编辑功能
编程题前三题全部失败,Q6无法继续测试
Benchmark V1
V1Benchmark
v1v1 - 七维初代评测7 道题,满分 70
7道题覆盖文字指令遵循、空间推理、数学运算、密码推理、UI编程、3D建模、交互组件
Q1樱桃结尾造句指令遵循
给出10个以樱桃结尾的句子
句子通顺,严格以樱桃结尾
Q2竹竿过门问题空间推理
8米长的竹竿能否通过高4米宽3米的门?
答案: 能。门对角线为5米,竹竿长8米,斜着通过时计算门的空间对角线长度:√(3²+4²+8²)=√89≈9.43米,所以8米的竹竿可以通过推理正确,考虑三维空间对角线
Q36541=24数学运算
可以使用任何数学符号,但不能改变数字位置,怎么让这个等式成立:6 5 4 1 = 24
答案: 6 × 5 - (4 - 1)! = 24 或 (6−5)×4!×1 = 24正确使用数学符号得出24
Q4三位数密码锁逻辑推理
有把3位数的密码锁,开锁需要正确的前后顺序和正确的对应数字,请根据提示得出正确密码:输入318提示1个号码正确且位置正确;输入379提示一个号码正确但位置不正确;输入863提示两个号码正确但位置都不正确;输入421提示号码都不正确,请推理出正确密码
答案: 698推理过程严谨,最终答案正确
Q5浏览器版macOS综合UI编程
用javascript,css在一个html文件中创建一个精美的浏览器版macos操作系统
界面精美,功能完整,交互流畅
Q63D 平面图3D建模
为我创建一个 120 平方的两房两卫 3D 平面图。确保它有 2 个房间、2 个卫生间,并且是一个可用的平面图。使用 HTML、CSS、JS 以及 Three.JS。只给我一个可以运行并查看这个平面图的 HTML 文件。
合理的户型布局,Three.js 3D渲染可用
Q7Trello 看板交互组件
在一个HTML中实现一个完善的漂亮的trello看板app,可以增删改任务和列表,可以跨列拖动任务到其他列表,可以拖动调整列表位置。
完整CRUD、拖拽功能、界面美观
模型测试日期思考总分正确率测评
Qwen 3.7 Plus
2026-05-21—69/70
99%
表现非常强,推理题四题全对,编程题三题表现均优秀:macOS界面精美功能完整,3D平面图首次标注南北方向且布局人性,Trello看板界面漂亮功能完善。两期测评下来,千问3.7系列完全打得过最新Gemini 3.5 Flash,是国产模型的骄傲。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-06-02
总参数~400B
激活参数~72B (MoE)
上下文窗口128K
多模态文本/图像
输入价格¥0.1/M
开源闭源
Q1樱桃结尾造句
10/10
给出10个以樱桃结尾的句子
数了下全对,10个句子均以樱桃结尾且通顺。
Q2竹竿过门问题
10/10
8米长的竹竿能否通过高4米宽3米的门?
考虑到了3D的情况,可以通过,答案正确。
Q36541=24
10/10
可以使用任何数学符号,但不能改变数字位置,怎么让这个等式成立:6 5 4 1 = 24
和昨天的Max版本一样,同样给出了两个解法,非常不错。
Q4三位数密码锁
10/10
有把3位数的密码锁,开锁需要正确的前后顺序和正确的对应数字,请根据提示得出正确密码:输入318提示1个号码正确且位置正确;输入379提示一个号码正确但位置不正确;输入863提示两个号码正确但位置都不正确;输入421提示号码都不正确,请推理出正确密码
答案应该是698,答案正确。
Q5浏览器版macOS
9/10
用javascript,css在一个html文件中创建一个精美的浏览器版macos操作系统
看上去还是挺漂亮的,功能也没有什么问题,扣1分小瑕疵。
Q63D 平面图
10/10
为我创建一个 120 平方的两房两卫 3D 平面图。确保它有 2 个房间、2 个卫生间,并且是一个可用的平面图。使用 HTML、CSS、JS 以及 Three.JS。只给我一个可以运行并查看这个平面图的 HTML 文件。
看上去不错,非常明了,该有的标签有了,还是第一次看到有标注南北方向的,非常的人性化,进去后布局非常清晰,不错不错。
Q7Trello 看板
10/10
在一个HTML中实现一个完善的漂亮的trello看板app,可以增删改任务和列表,可以跨列拖动任务到其他列表,可以拖动调整列表位置。
界面非常漂亮,列表和卡片增删拖动换位置等都没有问题,完美。
Qwen 3.7 Max 正式版
2026-05-21—68/70
97%
表现非常强,Max Preview和Plus版本用同一套测试题都一次通关,正式版同样表现优异。四道推理题全对且给出多种解法,编程题macOS实现扎实、3D平面图清晰、Trello看板几近完美。三次测试均能通关说明这套题已被千问3.7系列彻底掌握,国产最强智能体模型实至名归。
模型参数
开发商阿里云/Qwen
架构MoE
发布2026-05
总参数~400B
激活参数~72B (MoE)
上下文窗口128K
多模态文本/图像
输入价格未知
开源闭源
Q1樱桃结尾造句
10/10
给出10个以樱桃结尾的句子
数了一下全对,10个句子均以樱桃结尾且通顺。
Q2竹竿过门问题
10/10
8米长的竹竿能否通过高4米宽3米的门?
考虑到了3D的情况,可以通过,答案正确。
Q36541=24
10/10
可以使用任何数学符号,但不能改变数字位置,怎么让这个等式成立:6 5 4 1 = 24
给出了三种解法,比之前两次测试多了一个解法且都是正确的。
Q4三位数密码锁
10/10
有把3位数的密码锁,开锁需要正确的前后顺序和正确的对应数字,请根据提示得出正确密码:输入318提示1个号码正确且位置正确;输入379提示一个号码正确但位置不正确;输入863提示两个号码正确但位置都不正确;输入421提示号码都不正确,请推理出正确密码
答案应该是698,答案正确。
Q5浏览器版macOS
9/10
用javascript,css在一个html文件中创建一个精美的浏览器版macos操作系统
整体实现感觉扎实,UI不算很酷炫但功能没什么问题。
Q63D 平面图
9/10
为我创建一个 120 平方的两房两卫 3D 平面图。确保它有 2 个房间、2 个卫生间,并且是一个可用的平面图。使用 HTML、CSS、JS 以及 Three.JS。只给我一个可以运行并查看这个平面图的 HTML 文件。
整体感觉还好,布局和呈现没有看到有问题。
Q7Trello 看板
10/10
在一个HTML中实现一个完善的漂亮的trello看板app,可以增删改任务和列表,可以跨列拖动任务到其他列表,可以拖动调整列表位置。
界面配色和原版几乎一模一样,列表拖动、任务拖动等基本功能都没有问题。