> 自媒体 > (AI)人工智能 > GPT-4被曝重大缺陷,35年前预言成真!所有LLM正确率都≈0
GPT-4被曝重大缺陷,35年前预言成真!所有LLM正确率都≈0
来源:oi鼠嘞
2023-10-07 11:37:15
506
管理

最新研究揭示了大型语言模型的一个令人惊讶的局限性,被戏称为「逆转诅咒」。这项研究表明,尽管这些模型可以学会「A是B」的关系,但它们无法推断出「B是A」的关系。这一发现引发了广泛的关注和讨论,许多AI领域的专家对此表示惊讶。

研究人员通过一系列实验来验证这一现象。首先,他们利用虚构的数据对大型语言模型进行微调,教模型关于「A是B」的关系。然后,他们测试模型是否能够泛化到「B是A」的情况。结果显示,模型在这种情况下的表现几乎是零。

OpenAI的科学家Karpathy对这一发现表示了惊讶,他指出大型语言模型的知识是相当零散的。这一现象引发了对模型内部工作方式的深入思考,以及对AI领域未来发展的探讨。

研究人员还进行了一系列实验,探讨了「逆转诅咒」对模型在实际应用中的影响。结果显示,模型在某些情况下能够正确推断「A是B」的关系,但在「B是A」的情况下表现不佳。这可能是因为互联网上的文本数据更倾向于包含前者而不是后者。

有趣的是,人类思维中似乎也存在类似的「逆转诅咒」。当我们试图以相反的顺序检索信息时,往往比正向操作更困难。这一现象在实验中得到了验证。

总的来说,这项研究揭示了大型语言模型在推理能力方面的局限性,引发了对AI发展方向的深刻思考。对于AI领域的研究和发展来说,这是一项重要的发现,可能会引领未来的研究方向。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
关于作者
素素鴉(普通会员)
文章
2017
关注
0
粉丝
1
点击领取今天的签到奖励!
签到排行

成员 网址收录40418 企业收录2986 印章生成263660 电子证书1157 电子名片68 自媒体109920

0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索