佬们,有没有测模型具体降智多少的指标?

lulinkjason 2026-09-05 12:33 1

佬们都知道,GPT是会降智的。不管是中转站,还是自己号被风控,还是OpenAI自己抽风降算力,都会影响模型的智能程度。

之前的5.6 sol降智的问题,确实非常严重。那如今到了GPT6的时代,有没有一个测试题或者一套测试题,能大概估算出模型的智商值或者智力程度,看看它被降智了多少呢?


如果有的话,大概就能知道自己的号有没有被风控,或者中转站的号智商如何了,用着也放心


佬们有没有好办法


我之前知道的只有测juice,糖果题和水杯题。juice只能证明模型没问题,测不了智商,而糖果题,就不说以后的新模型会不会预训练,像GPT6这种智商,应该是可以轻松做对的。感觉是得有一个更好的办法了

最新回复 (11)
  • neteroster 09-05 12:35
    1

    codex里降就是直接路由到5.6luna,没有降低多少一说


    网页版之前也差不多,不知道现在有没有变


    中转惨水的话没那么好测,简单的路由可能可以用juice测出来,不过可以防御,站内也有一些通过模型输出分布测试的可以看看

  • lulinkjason 楼主 09-05 12:38
    2

    啊?不是吧


    我自己号被风控,是网页版直接路由到5.5 mini,codex智商没怎么变


    我用过的中转站,有自己没掺,测出是sol,或测出是sol和luna混用(风控导致的),但是糖果题都做的一塌糊涂


    现在的问题不是中转站掺没掺,而是他主观上没掺,但是因为风控,号池被降智,导致得出的答案太拉,我觉得这个才是最难受的地方

  • lulinkjason 楼主 09-05 12:39
    3

    Astra太狠了,low强度,20秒雷霆小思考,直接21。不知道有没有预训练这道题

  • neteroster 09-05 12:39
    4

    网页和codex是两套风控系统,是否风控和路由均独立。


    至少从目前的证据来看,codex就是用luna去回复风控请求(但是他不会告诉你,返回的字段仍然是sol,但有一个很隐蔽的字段会泄漏实际模型)

  • 还想成为88VIP 09-05 12:40
    5

    很难给出指标。一定要给可能只能去找一套题做

  • Doro2077 09-05 12:45
    6

    ^-^ 降智的本质是思考被官方那截断,或者给你路由到luna和mini模型。


    你只要用糖果题简单测试下就能知道自己有没有被风控了,被风控的号思考一定会被截断,然后导致秒思考答错。


    GPT6出了之后,中转依然大规模降智,本质是号全是被风控的。

  • lulinkjason 楼主 09-05 12:46
    7

    啊? ^-^6这么聪明,中转站现在的6依然做不对糖果题吗 ^-^

  • lulinkjason 楼主 09-05 12:47
    8

    是的呀,所以我现在就在讨论,咱们是否能凑出一套题来,通过打分来判断究竟降智到什么程度。或者有可能已经有大佬造出了类似的轮子?

    求教

  • 还想成为88VIP 09-05 12:48
    9

    应该不少佬或者他们公司都有自己的题库吧,公共的可能没有,有的跑分题库可能是公开的

  • Doro2077 09-05 12:48
    10

    ^-^本质路由的,无论是gpt6789,都给你路由到luna和mini上的

  • wuvi 09-06 12:51
    11

    佬,你所说的这个“很隐蔽的字段”有具体的详细信息么 ^-^

* 帖子来源Linux.do
返回