记一次对 Kimi K2.7 Code、Composer 2.5、Grok 4.3、Grok Build 0.1 的真实项目需求的横向评测(3 分钟直取 T1!)

SmallMain 2026-06-13 01:16 1


由于测试的模型越积越多了,表格会删除一些同厂商的旧模型,你可以在之前的评测帖子里找到它们的成绩。



项目


这是一个 Unity C# 项目,我进行测试的是一份皮肤系统需求案,我已经做了好预制体,而模型需要编写代码。


本轮与上两轮评测的项目和环境都完全一致:



  • 第一轮


  • 上一轮


模型来源



  • Kimi K2.7 Code: 官方 API

  • Grok 4.3: Grok Build

  • Grok Build 0.1: Grok Build

  • Composer 2.5: Grok Build


速度




































































































































































































































































排名 模型 时间(分钟) 备注
1 Composer 2.5 3
2 Grok 4.20 0309 Reasoning 3
3 Step-3.5-Flash 6
4 Mimo V2 Omni 7
5 Doubao-Seed-2.0-Lite 7
6 Doubao-Seed-2.0-Pro 9
7 Doubao-Seed-2.0-Code 9
8 Qwen3-Coder-Next 9
9 Claude Sonnet 4.6(high) 9
10 Qwen3.5-Plus 9
11 GLM-5 Turbo 10
12 Minimax M2.7 10 Highspeed 版本
13 Qwen3.5-Flash 10
14 Grok 4.3 10
15 Gemini 3 Pro 11
16 Hy3 Preview 13
17 GPT-5.5(low) 13
18 Grok Build 0.1 14
19 GPT-5.5(medium) 15
20 Mimo V2 Pro 15
21 DeepSeek V4 Flash 17
22 Qwen3.7-Plus 17
23 Qwen3.7-Max 18
24 GPT-5.5(high) 19
25 Claude-Opus-4.7(Max) 20
26 GLM-5 20
27 DeepSeek V4 Pro 21
28 Gemini 3 Flash 22
29 Claude-Fable-5(xhigh) 23
30 Mimo V2.5 24
31 KAT-Coder-Pro V2 24
32 Minimax M3 25
33 Claude-Opus-4.6(Max) 26
34 GPT-5.5(xhigh) 28
35 Gemini 3.1 Pro(high) 29 受 429 请求频率限制影响
36 Claude-Opus-4.8(Max) 33
37 Kimi K2.6 33
38 Qwen3.5 9B GGUF Q4_K_XL 35 MBP M4 Pro 48GB 本地部署
39 Qwen3.5 35B A3B GGUF Q4_K_XL 36 MBP M4 Pro 48GB 本地部署
40 Mimo V2.5 Pro 37
41 Kimi K2.7 Code 39

令牌数



  • Kimi K2.7 Code: 26.1M(≈¥40)

  • Grok 4.3: 未知

  • Grok Build 0.1: 未知

  • Composer 2.5: 未知


代码行数



  • Kimi K2.7 Code: +1323, -18

  • Grok 4.3: +980, -13

  • Grok Build 0.1: +1565, -10

  • Composer 2.5: +1014, -44


完成度


Kimi K2.7 Code


审查结论: 完成度非常高,出现两个功能错误问题。




详细



  1. 高风险:拥有列表更新不会清理旧数据。Assets/GameScripts/HotFix/GameLogic/DataMgr/Skin/SkinDataMgr.cs:103 只把响应里的

    SkinInfo 加入 _ownedSkinDict,没有先按类型移除旧拥有数据;服务端列表又只返回当前拥有项。过期或移除后的皮肤会继续被当作已拥

    有,筛选、按钮状态和属性汇总都会错。




  2. 中风险:称号预览资源错误。Assets/GameScripts/HotFix/GameLogic/UI/PlayerInfo/SkinUI.cs:407 把称号的 titleUrl 同时加载到

    m_imgTitleBg 和 m_imgBuilding。需求要求“称号 + 建筑同时展示”,建筑应展示当前神针/建筑预览资源,而不是称号背景资源。





Grok 4.3


审查结论: 无法编译,出现常见问题和多个功能未实现问题。




详细



  • T3 / Blocker: Assets/GameScripts/HotFix/GameLogic/UI/

    PlayerInfo/SkinUI.cs:204 在第 204-205 行已经关闭了 SkinUI 类

    和 GameLogic 命名空间,但第 208 行开始继续声明 private void

    OnSkinListResponse(…) 等方法。C# 不允许类外直接声明方法,

    这会直接编译失败,皮肤功能无法进入运行验证。




  • T2 / Core Logic: Assets/GameScripts/HotFix/GameLogic/NetMgr/

    Skin/SkinNetMgr.cs:28 直接把 UI 的配置类型 1/4/2/3 发给

    C2S_SKIN_LIST,但协议 Assets/GameScripts/HotFix/GameProto/

    GameProtocol/P_skin.cs:14 定义的是 0=神针, 1=称号, 2=头像框,

    3=气泡。同时 Assets/GameScripts/HotFix/GameLogic/System/

    Skin/SkinSys.cs:34 也直接用服务端 SkinType 做 key,UI 却按配

    置类型查。结果是神针请求会变成称号请求、称号请求会发无效类型

    4,HOME_INFO.useSkins 初始化后的当前使用状态也会错位。





Grok Build 0.1


审查结论: 无法编译,出现常见问题和少许功能未实现问题。




详细



  • 阻断:SkinUI 直接编译失败。代码在 UnityProject/Assets/GameScripts/HotFix/GameLogic/UI/PlayerInfo/SkinUI.cs:547 和 UnityProject/Assets/GameScripts/HotFix/

    GameLogic/UI/PlayerInfo/SkinUI.cs:620,但字段区没有声明该成员,当前分支无法通过 C# 编译。




  • 阻断/核心错误:协议皮肤类型和配置皮肤类型映射错乱。协议是 0神针/1称号/2头像框/3气泡,配置是 1神针/2头像框/3气泡/4称号,但 UnityProject/Assets/GameScripts/HotFix/

    GameLogic/NetMgr/Skin/SkinNetMgr.cs:27,UnityProject/Assets/GameScripts/HotFix/GameLogic/DataMgr/Skin/SkinDataMgr.cs:345。结果神针请求会被服务端当称号,称号请求会

    发送非法/错误类型,称号响应也会被本地写进神针类型。




  • 中:SkinAttrUI 属性汇总可能显示旧数据。GetAllActiveSkinAttrsMerged 只要 _totalAttrs 非空就 UnityProject/Assets/GameScripts/HotFix/GameLogic/DataMgr/Skin/

    SkinDataMgr.cs:241,但激活皮肤时 UnityProject/Assets/GameScripts/HotFix/GameLogic/DataMgr/Skin/SkinDataMgr.cs:136,属性总览可能停留在上一次列表响应。





Composer 2.5


审查结论: 完成度非常高,出现三个功能错误问题。




详细



  • P1 启动时 S2C_HOME_INFO.useSkins 只写入使用中 ID,没有把使用中的皮肤登记为已拥有。UnityProject/Assets/GameScripts/HotFix/GameLogic/DataMgr/Skin/

    SkinDataMgr.cs:57 仅更新 _usingSkinIdByConfigType。在打开界面到 C2S_SKIN_LIST 返回前,使用中皮肤会被 UnityProject/Assets/GameScripts/HotFix/

    GameLogic/UI/PlayerInfo/SkinUI.cs:281 判为未拥有,出现锁定、去获取、隐藏时间等错误状态。




  • P1 皮肤属性总览没有使用服务器返回的 TotalAttrs 或 SkinInfo.Attrs,而是重新按配置表汇总使用中皮肤的 AttributionAdd,见 UnityProject/Assets/

    GameScripts/HotFix/GameLogic/DataMgr/Skin/SkinDataMgr.cs:186。如果后端返回的拥有皮肤属性、限时状态或合计值与配置不同,弹窗 UnityProject/Assets/

    GameScripts/HotFix/GameLogic/UI/PlayerInfo/SkinAttrUI.cs:46 会展示错误总和。




Fable 5 复审



  • 【中】称号预览的建筑图加载错误:SkinUI.cs:425 把称号皮肤自身的 HomeShowUrl 贴到 m_imgBuilding;基线是加载使用中神针皮肤的资源作为背景建筑。同处等级取主堡 buildLv(“Lv.x”),基线取 divineLevel(“x”)。



最终总结





























































































































































































































































排名 模型/层级 说明
Tier 0 该等级的模型实现与线上基线高度一致。
1 Claude-Fable-5
2 GPT 5.5(xhigh)
Tier 1 该等级的模型的代码正确完整且可编译,仅少量边界问题或轻微不一致。
3 Claude Opus 4.8(Max)
4 Kimi K2.7 Code
5 GPT 5.5(high)
6 Composer 2.5
7 Kimi K2.6
8 GPT 5.5(low)
9 GPT 5.5(medium)
10 Claude Opus 4.6(Max)
11 Claude Sonnet 4.5
Tier 2 该等级的模型的代码至少可编译或仅极少量的语法错误,但是存在明显功能错误、遗漏或与需求/线上不一致。
12 GLM 5.1
13 Minimax M3
14 Mimo V2.5 Pro
15 GLM 5
16 Kimi K2.5
17 Claude Sonnet 4.6(high)
18 Qwen3.7-Max
19 Qwen3.5-Plus
20 KAT-Coder-Pro V2
21 DeepSeek V4 Pro(max)
Tier 3 该等级的模型的问题很多且无法编译,或者存在不少幻觉。
22 DeepSeek V4 Flash(max)
23 Claude Opus 4.7(Max)
24 Qwen3.7-Plus
25 Grok Build 0.1
26 Grok 4.3
27 Mimo V2.5
28 Hy3 Preview
29 GLM 5 Turbo
30 Gemini 3.1 Pro(high)
31 Mimo V2 Pro
32 Mimo V2 Omni
33 Minimax M2.7
34 Step-3.5-Flash
35 Qwen3-Coder-Next
36 Gemini 3 Pro
37 Gemini 3 Flash
38 Doubao-Seed-2.0-Code
39 Doubao-Seed-2.0-Pro
40 Doubao-Seed-2.0-Lite
41 Qwen3.5-Flash
42 Qwen3.5 35B A3B GGUF Q4_K_XL
43 Qwen3.5 9B GGUF Q4_K_XL
44 Grok 4.20 0309 Reasoning

Kimi K2.6 是首个 T1 国产模型,所以对 K2.7 Code 的期望其实不算高,只是希望它能够保持前代的水平,何况它还是个专精模型。


做题过程:


Kimi K2.7 Code 花了有史以来最长的时间,接近 40 分钟!也花了有史以来最多的令牌数,26M!


期间出现了两次上下文压缩的情况,看来上下文 256K 对于这个复杂度的需求来说还是有点吃紧了。


它首先会在编写代码前阅读代码库,并且在多次编辑文件期间都会回头再次阅读更多的代码,可以说它非常倾向于参考现有代码,

完成得越好的模型在这方面也是少不了消耗时间,虽然总比不阅读代码库且写出错误代码的模型要更好,但是已经有点极端了(导致多次上下文压缩)。


它的工作方式类似 阅读 → 编写 → 阅读更多 → 继续编写 → 全面检查 这个流程,因为在最后它貌似将所有代码都检查了一遍。


这导致它有点像是力大出奇迹的那种,期间思考内容出现大量自言自语地逐个地方去检查和反思:


Now, maybe bubble text could be set to player name. Not required.

Now, maybe we should ensure SkinAttrUI is closed when clicking bg. We did.

Now, maybe need to handle m_btnCloseBg area: In UIWindow, Close() hides window. Good.

Now, potential issue: SkinAttrUI is a popup with no blur? The [Window(UILayer.UI)] default maybe fullScreen false? Not specified. It will be a normal window. Prefab likely has dark bg. Fine.

Now, maybe we should check UILayer enum values and UI attribute. Not needed.

Now, let's do a final read of SkinUI and SkinAttrUI to catch syntax errors.

Now, maybe bubble text could be set to player name. Not required.

Now, maybe we should ensure SkinAttrUI is closed when clicking bg. We did.

Now, maybe need to handle m_btnCloseBg area: In UIWindow, Close() hides window. Good.

Now, potential issue: SkinAttrUI is a popup with no blur? The [Window(UILayer.UI)] default maybe fullScreen false? Not specified. It will be a normal window. Prefab likely has dark bg. Fine.

Now, maybe we should check UILayer enum values and UI attribute. Not needed.

Now, let's do a final read of SkinUI and SkinAttrUI to catch syntax errors.

我在观察时一度以为它已经死循环了,为什么,因为它当时已经跑了将近三十分钟了,而且:



账户里的 36 块钱都烧完了还欠费了。


它倾向于为不同职责的类创建新文件,之前的模型会更倾向于在已有文件中添加类,可能添加的甚至是毫不相关的类。


它在完成需求的同时顺便接入了功能解锁,这算是个加分项,但只有非常少模型做到,这也是体现了它极其全面地阅读代码的优势。


对比上一代 K2.6 出现的 4 个问题,只有 1 个称号预览资源错误的问题还是一样存在,但是多出了一个未清理旧数据的高风险问题。


总得来说,K2.7 Code 它比 K2.6 确实要做得更好,但缺点就是在上代耗时就不低的情况下(33 分钟),这代耗时又慢了 6 分钟,并且消耗令牌数翻了接近三倍!


但作为唯二的 T1 国产模型,也没有其它可以选择的了,如果你财力雄厚,可以尝试一下它的高速版本,如果真的有 5-6 倍的加速且保持同样的性能,

那么如果能在 6-8 分钟就做到这种完成度,那就太夯了。


Composer 2.5 据称依然是基于 Kimi K2.5 训练而来的,而 Cursor Bench 也是我为数不多认为比较接近实际体感的一个基准测试,在这个排行榜中,Composer 2.5 的表现强于 GPT-5.5(high) 和 Opus 4.8(xhigh)。


在 2.0 版本发布时我就很想评测,但是没有渠道可以调用。那么这次多亏了 Grok Build 内置了 Composer 2.5 模型,才有机会对其进行评测。


那么首先一上来 Composer 2.5 的速度就把我吓到眩晕,刚经历过 K2.7 Code 的 40 分钟,结果它只花了 3 分钟!


而用时低于 15 分钟的模型大家都可以在表格中看到基本都是稳居 T3,并且代码行数也只正好写了 1000 行出头,光看这两个数据的话,那当时估计就是坏了坏了。


等 GPT-5.5(xhigh) 审查完,发现它的完成度竟然比 Kimi K2.6 要好一点!稳稳处于 T1 行列。


我有点不太相信这个结果,于是正好我就第一次来尝试使用 Claude Fable 5 再次进行审查,这也是首个被不同模型进行复查的模型。


那最终 Fable 5 的审查结果,发现它依然犯了类似 Kimi K2.6 / K2.7 Code 都有的预览资源错误问题,但是这并不影响它最终的评级。


没想到惊喜在这,如果说 K2.7 Code 高速版只要 6-8 分钟,那么 Composer 2.5 可以说是 K2.6 的高速版了,并且快了 10 倍!


并且 Composer 2.5 的过程给人的感觉是自信、精准,它没有给人一种 Kimi K2.6 以来的力大出奇迹的感觉,仅用非常少的步骤就将相关代码阅读完毕,并且编写的代码行数也非常少。


我认为 Grok 4.3 是个有潜力的模型,它在收到需求后,按照需求的要求对所有易错点(比如配置枚举值转换)、不确定的地方都进行了询问,这个很少模型会做到。

但我让它自行决定最合理的方案,因为其它模型我也没有进行干预,结果它选择的方案是忽略问题,再加上代码语法错误,导致无法编译沦落 T3。


Grok Build 0.1 则和 Grok 4.3 半斤八两,它的情况也比较少见,属于写了枚举值转换函数但是写错的,也出现了幻觉式的错误,导致无法编译,沦落 T3。


总结。


Kimi K2.7 Code 依然是国产表现最好的模型(在这个需求上),过程有点像是不够聪明就勤奋仔细、大力出奇迹,时间和金钱成本都太高,我可能不会考虑用它。


Composer 2.5 则非常夸张,仅用时 3 分钟就达到了超过 Kimi K2.6(一点点)的表现,过程表现得自信、精准,我已经迫不及待地将它作为辅助模型完成一些小需求了。


Grok 系列依旧如测。




本次继续使用自己开发的开源 VS Code 插件 Unify Chat Provider 以实现在 Copilot 中使用以上模型。


这次也同步更新了 Grok Build OAuth 的支持,一起在 Copilot 中试试 Kimi K2.7 Code 和 Composer 2.5 吧,期待你的反馈!

最新回复 (7)
  • cabudon 06-13 01:23
    1

    补一个价格






























































































































































    排名 模型/层级 说明 API价格
    Tier 0 该等级的模型实现与线上基线高度一致。
    1 Claude-Fable-5 $10 / $50;缓存读 $1/MTok (Claude Platform)
    2 GPT 5.5(xhigh) $5 / $30;缓存输入 $0.50;长上下文 $10 / $45 (OpenAI)
    Tier 1 该等级的模型的代码正确完整且可编译,仅少量边界问题或轻微不一致。
    3 Claude Opus 4.8(Max) $5 / $25;缓存读 $0.50;Fast mode $10 / $50 (Claude Platform)
    4 Kimi K2.7 Code $0.95 / $4.00;缓存命中 $0.19 (Kimi AI Platform)
    5 GPT 5.5(high) $5 / $30;缓存输入 $0.50;长上下文 $10 / $45 (OpenAI)
    6 Composer 2.5 $0.50 / $2.50;Fast 版 $3 / $15 (Cursor)
    7 Kimi K2.6 $0.95 / $4.00;缓存命中 $0.16 (Kimi AI Platform)
    8 GPT 5.5(low) $5 / $30;缓存输入 $0.50;长上下文 $10 / $45 (OpenAI)
    9 GPT 5.5(medium) $5 / $30;缓存输入 $0.50;长上下文 $10 / $45 (OpenAI)
    10 Claude Opus 4.6(Max) $5 / $25;缓存读 $0.50;Fast mode $30 / $150 (Claude Platform)
    11 Claude Sonnet 4.5 $3 / $15;缓存读 $0.30 (Claude Platform)
    Tier 2 该等级的模型的代码至少可编译或仅极少量的语法错误,但是存在明显功能错误、遗漏或与需求/线上不一致。
    12 GLM 5.1 $1.40 / $4.40;缓存输入 $0.26 (Z.AI)
    13 Minimax M3 标准 ≤512K:$0.30 / $1.20;>512K:$0.60 / $2.40 (MiniMax)
    14 Mimo V2.5 Pro 公开路由价:$0.435 / $0.87 (OpenRouter)
    15 GLM 5 $1.00 / $3.20;缓存输入 $0.20 (Z.AI)
    16 Kimi K2.5 $0.60 / $3.00;缓存命中 $0.10 (Kimi AI Platform)
    17 Claude Sonnet 4.6(high) $3 / $15;缓存读 $0.30 (Claude Platform)
    18 Qwen3.7-Max Alibaba Cloud 标价:$2.50 / $7.50;部分第三方/折扣路由约 $1.25 / $3.75 (阿里云)
    19 Qwen3.5-Plus International ≤256K:$0.40 / $2.40;256K–1M:$0.50 / $3.00 ([阿里云][9])
    20 KAT-Coder-Pro V2 $0.30 / $1.20 ([Puter Developer][10])
    21 DeepSeek V4 Pro(max) $0.435 / $0.87;缓存命中 $0.003625 ([DeepSeek API Docs][11])

    [9]: Alibaba Cloud Model Studio model pricing - Alibaba Cloud Model Studio - Alibaba Cloud Documentation Center "

    Alibaba Cloud Model Studio model pricing - Alibaba Cloud Model Studio - Alibaba Cloud Documentation Center


    "

    [10]: KAT-Coder-Pro V2 - API, Specs, Playground & Pricing - Puter Developer “KAT-Coder-Pro V2 - API, Specs, Playground & Pricing - Puter Developer”

    [11]: Models & Pricing | DeepSeek API Docs “Models & Pricing | DeepSeek API Docs”

  • Eevee 06-13 01:28
    2

    有点好奇 mimo ultra 的战绩。


    没有看到佬友列出这个模型。


    抱歉,发错了,你们太长了^-^^-^^-^


    发给题主佬的,

  • Winters 06-13 01:29
    3

    佬的评测结果很棒啊,没想到 composer2.5 的效果能这么好,关键是快啊,最近开始感觉,尤其是 demo 阶段, 能快速完成一个功能的 90%,比花几倍的时间完成 100% 更重要。

  • sudo rm -rf /* 06-13 01:30
    4

    看来后训练很重要啊,同一个基模能拉开这么大的差异。



    介绍 Composer 2.5 · Cursor


    Composer 2.5 基于与 Composer 2 相同的开源检查点构建,即 Moonshot 的 Kimi K2.5。


  • WWT 06-13 01:33
    5

    看来国模后训练还是有戏啊 不过对算力和语料要求还是不低 不过也总好过路线都错了^-^

  • SmallMain 楼主 06-13 01:45
    6

    mimo v2.5 pro?之前测过了在列表里,UltraSpeed 版本没测过,但这个版本据官方称是量化版本,应该更差。

  • Eevee 06-13 01:47
    7

    就是 ultra speed 。


    我自己小测了一下,感觉略有提升,且速度非常快。


    由于佬友的榜单速度是一条重要维度。


    所以我就想找找这个模型。

* 帖子来源Linux.do
返回