将本站设为首页
收藏文学官网,记住:www.wxhqjs.net
账号:
密码:

文学书院:看啥都有、更新最快

文学书院:www.wxhqjs.net

如果你觉得好,恳请收藏

您当前的位置:文学书院 -> 我真的有一座法师塔 -> 第307章 模型崩溃(4506)

第307章 模型崩溃(4506)

温馨提示:如果本章属于内容错误等情况,请点击下面的按钮发送报告,我们会在一分钟内纠正,谢谢

模型3……”

杜长庚脸上闪过一丝忧色:“到了第5轮,模型3的过拟合就已经超过了经过十轮训练的模型1,而到了第九轮,整个模型已经濒临崩溃,几乎已经无法输出有意义的数据。”

“这个结果让我们很惊讶,于是用不同模型生成的数据来训练一个新的3B子模型,命名为模型4,最终训练后的性能与模型1非常类似,并没有什么改善。”

“在最初,我们认为是数据质量的问题,橘子大模型图片类数据中可能存在一定的失真,因此又采用文字进行了重复训练。”

“橘子大模型生成的文字数据错误率远比模型2使用的原始数据错误率更低,但最终采用橘子大模型生成的文字数据进行训练的模型1,仍旧出现了性能下降,多轮训练后的过拟合现象比模型2高出近五倍。”

“而在这种情况下,模型3同样在八到九轮之后,也出现了模型崩溃。”

“也就是说,无论AI生成的数据质量高低,只要采用AI生成的数据训练大模型,就会造成大模型性能下降,这……这简直不可思议!”

“简直就像……”

“近亲繁殖?”陆嘉言好奇的接了一句。

“对!近亲繁殖!没错!”杜长庚一拍巴掌,惊讶的看了一眼陆嘉言,没想到这个小老板娘明明是个外行,理解力还真不错。

方豫摸着下巴若有所思。

对这个结果,他自己早就有所猜测,否则也不会提出做对比实验的办法。

杨子龙和杜长庚所发现的问题,粗看上去确实有点诡异,相同的数据,被AI处理过一遍,再用来训练另一个AI,效果居然比不上质量更差的人工清洗的数据。

而再用这个训练后的AI生成的数据继续训练AI,无论是训练哪个AI,又会造成性能进一步下降。

这个问题看上去诡异,但实际上,只要稍稍思考一下也就能明白,应该还是数据多样性和复杂性不断被AI简化所造成的问题。

不用说橘子大模型,即使是柚子,生成的数据也不可能是百分之百完全正确的,虽然这些错误可能比人工数据要少,但错误的方式却缺乏多样性和复杂性。

说白了,就是AI聪明的千篇一律,但人类却愚蠢的千奇百怪。

但在种族传承的角度上来说,愚蠢的千奇百怪的人类,却比自己创造出比人类更聪明的AI具备更强的种族传承能力。

窝草?这么一想,孟广康那种傻x,对人类


  本章未完,请点击下一页继续阅读!

看了《我真的有一座法师塔》的书友还喜欢看

四重分裂
作者:微叶梧桐
简介: 作为个高智商精神分裂,墨檀表示自己压力很大。

而一款名为【...
更新时间:2025-02-05 13:30:00
最新章节:第两千四百六十五章:踏破铁鞋无觅处
超级上门女婿
作者:一起成功
简介: 窝囊废物的上门女婿叶凡,无意中得到太极经和生死石的传承,自此开始了不一样的人生,他医...
更新时间:2025-02-05 13:32:48
最新章节:第四千一百一十七章 你不会有这个机会
年代1960:穿越南锣鼓巷,
作者:就是闲的
简介: (想看吃糠咽菜的勿进)(无戾气,空间,搞笑)李来福穿越到南锣鼓巷88号?
<...
更新时间:2025-02-05 14:29:16
最新章节:第1384章 实在的小女人
柯南里的捡尸人
作者:仙舟
简介: 《伪·莫里亚蒂的酒厂生涯》、《如何正确蹭到死神光环》

——...
更新时间:2025-02-05 13:31:00
最新章节:2997【饥饿的组织干部们】求月票ヽ(〃∀〃)ノ~
日常系满级男神
作者:摇滚菠萝糖
简介: 单身发胖,人生无望……被女友抛弃,独自前往魔都重新开始的江源,突然人生开挂了。
更新时间:2024-12-23 09:30:00
最新章节:566 得救!
联盟之嘎嘎乱杀
作者:旁门祖师
简介: 简单选手,听说你和阿姨一起逛街,表现很亲密,请问你们的关系是?

...
更新时间:2025-02-05 14:09:00
最新章节:1098