当前位置: 江南文明网 > 科技 > 智能 >

DeepMind:大模型又曝重大缺陷

条评论

DeepMind:大模型又曝重大缺陷

DeepMind的研究人员发现,LLM有一个天生的缺陷——在推理过程中无法通过自我纠正获得更好的回复,除非数据集中预设了真值标签。马库斯又高兴地转发了这篇论文。

大语言模型又一项重大缺陷被DeepMind曝光!

LLM无法纠正自己推理中的错误。

「Self-Correction」作为一种让模型修正自己回答的技术,在很多类型的任务中都能明显改进模型的输出质量。

但是最近,谷歌DeepMind和UIUC的研究人员却发现,对于推理任务,LLM的「自我纠正机制」一下子就没用了。

而且LLM不但不能自我纠正推理任务的回答,经常自我纠正之后,回答质量还会明显下降。

马库斯也转发了这篇论文,希望让更多研究人员关注大语言模型的这一缺陷。