我宣布,互联网内容已经是个巨大的人体蜈蚣

橘子岛岛主 2026-08-27 17:05 1

正题,主要想吐槽的是现在 AI 大模型越进化越不说人话的问题,各种黑话,生僻字夹杂,奇怪的断句和比喻,感觉是离正常人越来越远了。现在感叹模型进步都是越来越“聪明”,但很难说越来越像个“人”。


互联网上大量充斥 AI 自己拉的屎,又反复被拿去训练,已经形成^-^闭环,变成了人体蜈蚣。


查了下这个叫做“模型坍缩”




  • 第一代:在人类真实互联网数据训练

  • 第二代:拿第一代 AI 生成的文本去训练新模型 → 开始丢失信息多样性

  • 第三代:再用第二代 AI 产出物训练 → 坍缩加剧,输出越来越单调、套路化、抽象、空话多



当大模型用另一台 AI 生成的数据当作训练数据,反复迭代训练,几代之后,模型会慢慢丢失真实世界原始数据里的数据,多样性、细节;输出越来越趋同、刻板、空洞、失真、想象力下降,甚至产生事实错误。


都有点忘记了最初 gpt3.5 的时候语气清澈,清晰易懂的样子了 ^-^


我们还能回到,大模型可以像真人一样写作,写出清新质朴的语言的样子吗,如果只会愈演愈差,那么写作也许是一门好营生,咱们真人的写作会永远有稀缺性 ^-^

最新回复 (10)
  • jimchen 08-27 17:06
    1

    让子弹飞一会,过段时间AI反噬,让大家慢下来重新审视人与AI

  • cloudboring 08-27 17:07
    2

    好像有论文研究这个问题来着,但我觉得解决这个问题应该不会太久

  • Kaiser41 08-27 17:08
    3

    这不就是以前互联网上的那个吗?贴吧-b站-抖音-小红书-快手等等等等各种自由组合

  • 🔨 08-27 17:09
    4

    人体蜈蚣啊,让我想起了一张图


  • lzy 08-27 17:10
    5

    语言能力如此倒退,是因为AI现在在迭代的过程中越发侧重数学和编程能力了吧

  • 悠悠 08-27 17:14
    6

    这个问题在claude身上尤其严重啊

  • 业余的正常人 08-27 17:18
    7

    清新质朴



    ^-^ 普通人大部分时间不会是这样的吧。


    反而觉得现在 AI 越来越像人了,时而迷迷糊糊,时而情绪外溢。


    另外,人类的本质就是复读机,

  • 橘子岛岛主 楼主 08-27 17:19
    8

    是的,谁还能想到 4.6 的时候还被认为是活人感最强的模型,4.7 出来感觉是蒸馏了 gpt 有点不说人话,到一坨乱七八糟可读性极差的文字,很难看得下去 ^-^

  • Eevee 08-27 17:38
    9

    好消息是:语料基本上已经训练完了


    人类的原始数据其实并不多


    有价值的就更少了

  • jeff 08-27 22:10
    10

    没有你想的这么简单,你低估了商业取向对大模型能力的锁死,头部AI公司(OpenAI、Anthropic等)的模型核心变现途径是代码生成、Agent等,结构工整、挑不出错、没有任何偏激观点的文字反而是最符合商业利益的,现在大厂们的算力极大程度倾斜于逻辑推理和代码能力上,写作能力的权重事实上在被边缘化,对于模型能写出有活人感,创作性的文字的需求偏低

* 帖子来源Linux.do
返回