多彩贵州网新闻频道

您当前的位置 : 多彩贵州网  >  多彩贵州网国内国际  >  国际新闻

用AI数据训练AI效果怎样?国际最新研究称可能最终导致崩溃

2024-07-27 21:37
来源:中国新闻网

  中新网北京7月27日电(记者 孙自法)国际学术期刊《自然》最新发表一篇计算机科学论文指出,用人工智能(AI)生成的数据集训练未来几代机器学习模型可能会污染它们的输出,这个概念称为“模型崩溃”。

  该研究显示,原始内容会在AI数代内变成不相关的胡言乱语,显示出使用可靠数据训练AI模型的重要性。

  生成式AI工具越来越受欢迎,如大语言模型等,这类工具主要用人类生成的输入进行训练。不过,随着这些AI模型在互联网不断壮大,计算机生成内容可能会以递归循环的形式被用于训练其他AI模型或其自身。

  论文第一作者兼共同通讯作者、英国牛津大学Ilia Shumailov和同事及合作者一起,用数学模型演示了AI模型可能会如何出现模型崩溃。他们证明了一个AI可能会忽略训练数据中的某些输出(如不太常见的文本),导致其只用一部分数据集来自我训练。

  随后,论文作者还研究了AI模型会如何应对主要用人工智能生成的训练数据集。他们发现,给模型输入AI生成的数据会减弱今后几代模型的学习能力,最终导致模型崩溃。他们测试的几乎所有递归训练语言模型都容易出现重复短语。比如,一个用中世纪建筑文本作为原始输入的测试到第九代的输出已经是一串野兔的名字。

  论文作者指出,为了让人工智能成功使用其自身输出进行训练,本次研究认为用AI生成数据训练一个模型并非不可能,但必须对数据进行严格过滤。与此同时,依赖人类生成内容的科技公司或许能比竞争对手训练出更高效的AI模型。

一审:王珏

二审:汤成伟

三审:李蓓

作者: 编辑:王珏

相关阅读

国际最新研究:天文学家观测到一颗巨型系外行星    2024-07-25
国际最新研究:月面发现潜在可进入洞道 或可选址为月球基地    2024-07-18
国际最新研究:非洲象或会用类似名字的叫声打招呼    2024-06-11
国际最新研究:火星火山上发现晨霜    2024-06-11

网站简介广告刊例联系方式网站地图

版权所有 未经授权禁止复制或建立镜像 增值电信业经营许可证(ICP):黔B2-20010009 互联网新闻信息服务许可证: 5212006001

营业执照:520000000029527 信息网络传播视听节目许可证:2408241

互联网出版许可证:新出网证(黔)字001号