skill 版本迭代收益如何量化

马上来啦 2026-08-11 15:10 1

我现在有个定制开发产品,这个定制开发我做成了 skill形式,输出即成品,skill 维护迭代就很重要了。我不停优化这个流程,skill 迭代发布,怎么量化每次更新是不是正向优化呢?

最新回复 (4)
  • 洛卡卡了 08-11 15:15
    1

    一般量化的标准维度我个人觉得可以从几点分析吧,第一是看每次任务执行的成功率或者完成率,第二个是看输出质量也就是输出一致性吧,第三是看执行效率吧比如从时间成本方面观察,第四是看用户反馈信息?

  • Yu_cc 08-11 15:19
    2

    可以通过把这个新版本的skill配置灰度去灰度用户,用户生成成品的时候,当前版本和新版本生成两份,让用户选择,在灰度一段时间后看用户选择结果去迭代skill版本。

  • TCsCLj 08-11 15:34
    3

    skillopt 和 skillspec 之类很多工具,自己研究去吧

  • StormOfCup 08-11 15:50
    4

    做好自动化回归测试

    把重复的用例写成自动化脚本,每次版本构建自动执行。

    适合高频、重复场景,接口回归、UI 回归都可以做。

* 帖子来源Linux.do
返回