分享一点关于 516 降智问题的测试结果

Bob Kit 2026-07-12 00:08 1

众所周知,gpt-5.5 有所谓的降智问题(推理token截断至516),之前也在L站看到大佬们讨论修改系统提示词可以缓解。最近 gpt-5.6 出来了,codex 也更新了好多版,我在本地又复测了一波,以下是结果:




5.5-xhigh-不修改系统提示词





5.5-xhigh-修改系统提示词





5.5-high-修改系统提示词



可以看出,修改系统提示词对 gpt-5.5 的 xhigh 是非常有效的,能极大缓解降智(至少对于糖果问题是这样)。而对于 gpt-5.5 的 high,似乎没啥效果抑或效果不明显。


再放两组 gpt-5.6-sol 的:




5.6-sol-xhigh-不修改系统提示词





5.6-sol-xhigh-修改系统提示词



可以看到,不管是修改还是不修改系统提示词,好像都没啥区别。疑似有少量 1034 的推理截断,但是最终结果是正确的,不确定这个在实际编程中会不会有影响。

最新回复 (2)
  • Jerome 07-12 00:12
    1

    gpt-5.6-sol low 能答對,只錯一次,gpt-5.6-terra high 完全沒有一次正確…

  • Bob Kit 楼主 07-12 07:39
    2

    我的 token 有限,希望有更多的佬跑一点其他模型的其他思考强度出来作为参考

* 帖子来源Linux.do
返回