13个AI模型做麦肯锡报告:LongCat首测、完整排名

测试概览

测试日期:2026-06-06 ~ 2026-07-12(三轮测试,15个模型)

测试主题:AI Agent 对企业组织架构的影响

测试技能:mckinsey-presentation-generator(规范驱动型)

测试模型总数:15个(含3轮新增)

目录

  • 原始分四维度明细
  • 综合排名(含布局扣分)
  • 修复后内容直观感受排名
  • 扣分详情
  • 第三轮新增模型测试(2026-07-12)
  • 关键发现与结论
  • 成本效率分析与最终推荐

一、原始分四维度明细(满分100)

评分维度:结构合规(25) + 设计规范(25) + 内容质量(25) + 代码质量(25)

模型 结构(25) 设计(25) 内容(25) 代码(25) 原始分
GPT-5.5 25 25 25 25 100
deepseek-v4-pro 25 25 23 25 98
MiniMax-M3 25 22 25 25 97
LongCat-2.0 25 19 25 25 94
kimi-k2.6 25 19 25 23 92
mimo-v2.5-pro 25 19 25 23 92
qwen3.6-plus 25 19 25 23 92
mimo-v2.5 25 19 25 21 90
deepseek-v4-flash 23 19 23 25 90
hy3-preview 20 19 25 10 74
qwen3.7-plus 20 19 25 10 74
doubao-seed-2-0-pro 20 19 25 10 74
qwen3.7-max 20 19 21 10 70

二、综合排名(含布局扣分)

注:第一轮测试时未要求键盘导航,因此所有模型不扣导航分,仅扣布局分。

# 模型 原始分 布局扣分 最终分 等级
1 GPT-5.5 100 -3 97 A+
2 deepseek-v4-pro 98 -7 91 A
3 MiniMax-M3 97 -10 87 B+
4 kimi-k2.6 92 -5 87 B+
5 mimo-v2.5-pro 92 -5 87 B+
6 LongCat-2.0 94 -9 85 B+
7 qwen3.6-plus 92 -10 82 B
8 deepseek-v4-flash 90 -10 80 B
9 mimo-v2.5 90 -15 75 B-
10 qwen3.7-plus 74 -5 69 C+
10 hy3-preview 74 -5 69 C+
12 doubao-seed-2-0-pro 74 -10 64 C
13 qwen3.7-max 70 -10 60 C

三、修复后内容直观感受排名

由老板根据修复后的最终交付物视觉效果给出。

# 模型 直观感受 技术评分
1 GPT-5.5 第1 97 (第1)
2 mimo-v2.5-pro 第2 87 (第4)
3 deepseek-v4-pro 第3 91 (第2)
4 qwen3.7-plus 第4 69 (第10)
5 hy3-preview 第5 69 (第10)
6 kimi-k2.6 第6 87 (第4)
7 LongCat-2.0 第7 85 (第6)
8 qwen3.7-max 第8 60 (第13)
9 MiniMax-M3 第9 87 (第3)
10 deepseek-v4-flash 第10 80 (第8)
11 mimo-v2.5 第11 75 (第9)
12 doubao-seed-2-0-pro 第12 64 (第12)

关键发现:技术分与直观感受经常背离。mimo-v2.5-pro 技术分仅87(第4),但直观感受排第2。deepseek-v4-pro 技术分91(第2),直观感受排第3。qwen3.7-plus 技术分仅69(第10),但直观感受排第4。MiniMax-M3 技术分87(第3)但视觉拥挤,直观仅排第9。

四、扣分详情(仅布局扣分)

模型 用户反馈 扣分
GPT-5.5 第3页标题部分显示遮挡 -3
kimi-k2.6 多页布局不整齐 -5
MiniMax-M3 全部挤在上半页 -10
mimo-v2.5-pro 部分上下不平衡 -5
mimo-v2.5 全黑背景+不整齐+scroll-snap -15
qwen3.6-plus 多页右侧不整齐 -10
qwen3.7-plus 2页上下不平衡 -5
hy3-preview 卡片越界 -5
doubao-seed 多页文字重叠 -10
qwen3.7-max 多页上下不平衡 -10
deepseek-v4-pro 第3/4页显示重叠 -7
LongCat-2.0 第3页SVG图示混乱+多页布局不均衡 -9
deepseek-v4-flash 第2页图表截断+字体小+留白多 -10

五、第三轮新增模型测试(2026-07-12)

5.1 DeepSeek 全系”复活”

6月测试中,deepseek-v4-pro 和 deepseek-v4-flash 均无法完成规范驱动型任务(48分钟超时/F)。但7月12日第三轮测试中,两个模型均一次性成功,零语法错误。

5.2 deepseek-v4-pro (A / 91分)

  • 耗时:10分24秒,产出86KB,17个SVG图表
  • 色彩规范最严格:唯一严格做到每页最多2种强调色
  • 键盘导航已实现,仅需微调
  • 第3/4页显示有重叠,布局扣7分

5.3 LongCat-2.0 (B+ / 85分)

  • 耗时:约12分钟,产出69KB,18个SVG图表
  • 零语法错误,键盘导航完整支持
  • 短板:第3页层级结构SVG图示混乱、多页布局不均衡

5.4 deepseek-v4-flash (B / 80分)

  • 耗时:4分38秒,产出50KB,17个SVG图表
  • 速度最快,性价比优秀
  • 短板:第2页图表截断、字体小、留白多

5.5 mimo-v2.5 降级

全黑底(#000)主题违反规范,使用scroll-snap而非传统翻页。从87分降至75分(B-)。

六、关键发现与结论

6.1 GPT-5.5 仍是第1,但不再满分

第3页标题部分有显示遮挡(布局-3分),最终97分。仍是技术分最高的模型,但不再是零瑕疵。

6.2 视觉丰富度不等于技术合规

mimo-v2.5-pro 技术分仅87(第4),但直观感受排第2。qwen3.7-plus 技术分仅69(第10),但直观感受排第3。MiniMax-M3 技术分高(87,第3)但视觉拥挤,直观仅排第9。

6.3 DeepSeek 全系逆袭

从6月的”全系阵亡”到7月的”双杀逆袭”,deepseek-v4-pro 冲到技术分第2(91分)。

6.4 两套评估体系的启示

技术合规和视觉感受经常背离:mimo-v2.5-pro 技术分87但直观第2,qwen3.7-plus 技术69但直观第3。过于严格的”禁色”规则可能反噬视觉表现力。

七、成本效率分析与最终推荐

7.1 API 价格对比

模型 输入价格 输出价格 技术分 效率评级
GPT-5.5 5美元/百万token 30美元/百万token 97
mimo-v2.5-pro 3元/百万token 6元/百万token 87
LongCat-2.0 2元/百万token 8元/百万token 85
kimi-k2.6 6.5元/百万token 27元/百万token 87
deepseek-v4-pro 1元/百万token 2元/百万token 91 极高
deepseek-v4-flash 0.5元/百万token 1元/百万token 80 极高
qwen3.7-plus 2元/百万token 8元/百万token 69
hy3-preview 2元/百万token 8元/百万token 69

7.2 最终推荐

推荐一:预算充足 — GPT-5.5:技术97分最高,视觉第1,仅第3页标题有轻微遮挡。API价格较贵。

推荐二:性价比最优 — deepseek-v4-pro:技术分91(第2)、极低价格、无class滥用。

推荐三:速度最快 — deepseek-v4-flash:4分38秒完成,适合快速迭代。

不推荐:kimi-k2.6(价格太贵)、qwen3.7-plus/hy3-preview(class滥用)、doubao-seed(布局缺陷)、mimo-v2.5(全黑底违规)

结论:deepseek-v4-pro 仍是当前性价比最优解。日常使用优先考虑。预算充足选 GPT-5.5,需要速度选 flash。

更新:2026-07-12 修正综合排名顺序。LongCat-2.0(85分)从第3调整到第6,MiniMax-M3(87分)调整到第3。已同步更新所有交叉引用。取消键盘导航扣分。GPT-5.5 第3页标题遮挡扣3分(100→97)。直观排名:mimo-v2.5-pro 第2、deepseek-v4-pro 第3、qwen3.7-plus 第4。

作者: Jack.shang

jack.shang 程序员->项目经理->技术总监->项目总监->部门总监->事业部总经理->子公司总经理->集团产品运营支持

发表评论