2. Linux.do
  3. 为什么佬们测模型不直接跑现成题库？

为什么佬们测模型不直接跑现成题库？

xiaomoyi 2026-09-08 20:45 1

deepswe官方好像提供了题库，为啥佬友在测试的时候不直接测题库呢？都是测试鹈鹕这类。


deepseek我还是很喜欢的，即使pro拉了一下，还涨价，我也不怎么用，但总的来说还是很喜欢deepseek。

国模最喜欢看好的就是ds和kimi了。


准备自己电脑用ds新模型跑几题deepswe看看什么水平。

最新回复 (9)
  • duroey 09-08 20:47
    1楼

    题库怕是机器复习，用处不大

  • 一只猪 09-08 20:47
    2楼

    机器复习都来了，笑死人了

  • daisheng 09-08 20:50
    3楼

    但是题库的话，说不定是人家针对题库训练过的小镇做题家呢（bushi

  • impouo 09-08 20:52
    4楼

    能拿到的公开题目基本都已经刷爆了吧。（虽然鹈鹕 mc这些肯定也刷过了）鹈鹕最起码可以直观看到效果，而且降智的和智力确实低的模型确实做不好鹈鹕

  • xiaomoyi 楼主 09-08 20:52
    5楼

    因为DEEPSWE的分数我觉得还是蛮符合体感的，难道是为了防止模型训练，开放的和他们内部题库不一样么？

  • 摇摆熊 09-08 20:53
    6楼

    开卷考试还叫考试麻。

  • daisheng 09-08 20:59
    7楼

    不知道耶，不过我觉得别人模型发行之前就算没有使用那些题库作为训练数据，但是肯定会发行之前拿市面上有的题库测测的呀。毕竟模型能力一般都要量化打分的

    要不然新模型跑出来的分还没有旧模型跑出来的分高，那不是倒开车了吗 ^-^

  • 冰原Bill 09-08 21:01
    8楼

    题库费token，直接问水果题，low思考30秒内回答正确，只能是astra

  • xiaomoyi 楼主 09-08 21:38
    9楼

    这倒是真的，deepswe跑全要113题，dsflash价格都得跑很多刀，还费时间。

    我准备测3题取个平均值

* 帖子来源Linux.do
附近帖子
返回
飞读
随机推荐