我恨gpt5.6，累死了！

天怒 2026-07-11 18:20 1

今天想着把产品的bug清一清，问了一下GPT 5.6solmax，让它详细审查一下有哪些bug。

打开了恶魔之门啊^-^，哪来的这些bug呀？我吐了，而且都是真实存在的。

我之前5.5自动审的时候，它给我找出来一大堆乱七八糟的边界bug。

5.6你就真能给我抓出来bug了？

你抓完不还得我修、我测、我审？啊啊啊。

不过话又说回来，也不一定是5.6真的那么强。

5.5的时候我觉得它完成不了这个事情，所以我没有认真地跟它说，就让它象征性地读代码查一下。

5.6我交代它详细地告诉它怎么查。

模型的实力也会影响到使用者对它的态度。

所以日用体验真的不一定能代表模型实力。

最新回复 (13)

Waterfox 07-11 18:22

1楼

其实也不用5.6

拿两个不一样的AI互搏就能收获很好的效果

每次另外一个AI说出bug，然后让这边确认，都说属实
天怒楼主 07-11 18:23

2楼

主要是之前抓的都是一些非常边界的，基本没什么用的东西，不是误判
Waterfox 07-11 18:24

3楼

对，有时候真的会抓一些很无聊的东西，修也没太大价值，不修的话检查的时候又老bb
天怒楼主 07-11 18:25

4楼

但是5.6真的给我抓出来一堆真的bug，可复现的，看到就想修的，

（不过还是那句话，没有严格ab，无法论证5.5做不到
Maxlu 07-11 18:34

5楼

Caveman开源项目，文言文skill绝对没废话 ^-^
清酒半盏 07-11 18:35

6楼

还有这种skill，是不是很省token
越笑越见疤痕 07-11 18:36

7楼

让AI抓BUG是抓不完的，永远有BUG。保证用户功能和体验不受影响，没有数据安全和系统稳定性的bug就行了
Maxlu 07-11 18:37

8楼

省token，特别对于废话非常多的模型管用
chumu 07-11 18:38

9楼

5.6 sol max修复的bug他自己会一个一个构造场景去复查，5.5不会，不知道为什么，我都是用的同样的提示词，而且5.5会经常出现指令不遵循
天怒楼主 07-11 18:40

10楼

bug可以分为两种，

一种常见的ai抓的bug是，去啤酒馆点了一碗炒饭。比如存盘失败或者退出后的0.5秒内用户输入。这种完全不可能的边界bug。

5.6给我抓的是，这种真的会遇到的问题。
Megasoft 07-11 18:40

11楼
DemonW 07-11 18:44

12楼

有个这个项目的benchmark的，省不少token，但是会降一点智，如果不是那么成本敏感没必要。
老G 07-12 00:26

13楼

我还没用上5.6,cpa反代的是不是要更新cpa才能用啊