标签:证明者-验证者博弈

OpenAI最新力作:探索超级对齐理论,模型间验证者-证明者博弈提升安全性与可读性

OpenAI近期发布了一篇关于“超级对齐”研究的最终论文,提出了一种让大、小模型互相博弈以提升生成内容可读性的方法。该研究旨在在保持准确率的同时,使模型输出更易于人类理解。通过模拟多伦多大学的“证明者-验证者”博弈框架,OpenAI让大模型作为“证明者”,小模型作为“验证者”,二者在相互竞争中共同进步。这种方法使得大模型的输出变得更加易懂,且准确率没有显著下降,同时小模型的判断能力也得到提高。 论文作者之一Yining Chen认为,这种方式可能使未来的模型超越人类智慧。尽管超级对齐团队已解散,但这项研究仍引起热...