2. Linux.do
  3. DSH是适配多模态的！

DSH是适配多模态的！

Maple 2026-08-14 08:18 1

用DSH全默认配置 + V4 flash试水 给了个任务 发现会自己调用视觉工具然后报错^-^



也就是说，要么是deepseek考虑继续搞多模态模型，所以提前在harness里做了，要么是图开源精神，方便大家用别的模型？ ^-^


但是自家的模型没有视觉居然还默认给了视觉工具且自己调用了，这个肯定是有点问题的，看来确实是有点赶鸭子上架了hhh

最新回复 (13)
  • Hax 08-14 08:19
    1楼

    暂时不用想了，估计和zhipu一样，搞一个mcp工具识图，ps:可能花钱

  • 绎袅 08-14 08:19
    2楼


    蛤？有吗…没看出来，工具调用的out，没看懂…

  • Maple 楼主 08-14 08:20
    3楼

    看那个tool call，是调用的看图工具

  • 绎袅 08-14 08:22
    4楼

    现在看上去的样子好像是有这个工具然后没有填充支持图片的模型？


    看这个out好像是吧..

  • xiaoyan 08-14 08:24
    5楼

    我感觉应该是兼容


    总不能做个残废的agent出来吧

  • xiaoyan 08-14 08:24
    6楼

    没有报错，直接就是看模型id，然后判断这个模型不支持识图，避免了报错

  • Maple 楼主 08-14 08:25
    7楼

    但按理说应该要对是否多模态的模型做个区分，非多模态的模型直接不给视觉的tool就好了


    （然后v4 flash还很理所当然的就开始调工具看图了，甚至怀疑是不是蒸馏了哪家多模态模型hhh）

  • xiaoyan 08-14 08:28
    8楼

    他这个相当于多一步，先调用，然后判断支不支持多模态，如果非多模态的模型直接不给视觉的tool，那是做个会话的硬限制么，万一中途切换模型呢，还是写入上下文，看模型id呢，那就增加了一写长期上下文，所以感觉dsh目前的解决方案其实算比较好的



    怀疑是不是蒸馏了哪家多模态模型



    这个是看tool吧，总不能一种训练模型，告诉模型，你不支持看图吧


    万一用户自己整个视图的tool，就支持了，站内好像有佬这么玩过

  • Maple 楼主 08-14 08:31
    9楼

    万一中途切换模型呢



    这个角度确实没考虑过，这么说的话还真是该给tool，挺合理的

  • Hamotim 08-14 08:33
    10楼

    类型定义里面有多模态的内容，毕竟还可以接其他家的

  • scp3500 08-14 08:34
    11楼

    有个图片转述的dsh-vision插件

  • lzh 08-14 08:39
    12楼

    deepseek的招聘岗位里面有多模态相关的，他们好像不是放弃多模态，而是战略地位稍微低一点

  • Maple 楼主 08-14 08:49
    13楼

    梁子不是说觉得现阶段多模态不重要来着，说等智能程度上去了多模态能力会自己长出来（忘了原话了，反正大概是这个意思）

* 帖子来源Linux.do
附近帖子
返回
飞读
随机推荐