标签:科学

Nature封面:AI训AI 越训越傻

最近,来自牛津、剑桥等知名学府的研究人员发现了一个惊人的现象:当大型人工智能模型使用合成数据进行训练时,它们的表现可能会迅速下滑甚至崩溃。这项研究被选为Nature杂志的最新一期封面故事。 研究团队通过一系列实验展示了模型崩溃的过程。他们选取了Meta的OPT-125m模型作为测试对象,向其提问有关中世纪建筑的信息。每次模型的回答都会被用来训练下一轮的模型。起初,模型的回答尚可接受,但在经过九轮迭代后,模型开始出现严重的偏误,甚至开始胡言乱语,提及与主题无关的,如“兔子”。 论文的主要作者表示,虽然他...