> 自媒体 > (AI)人工智能 > “AI教父”Geoffrey Hinton:AI模型GPT-3远不如人类大脑
“AI教父”Geoffrey Hinton:AI模型GPT-3远不如人类大脑
来源:真格量化
2023-05-22 17:01:42
812
管理

自从上个世纪八十年代起,“AI 教父”杰弗里・辛顿(Geoffrey Hinton)就一直在从事有关深度学习的研究。然而,研究成果却受到缺乏数据以及计算机功能不足的限制。不过,他对这项技术的执着态度最终还是给人类带来了巨大的益处。在第四届 ImageNet 大赛上,几乎每支团队都用上了深度学习技术,并且达到了惊人的准确率。不久之后,深度学习不仅在图像识别任务中得到了应用,还被广泛地应用于其它领域。

30 年前,人们都觉得提出的神经网络的想法是离经叛道。但辛顿表示,现在几乎所有人都认同了他的想法。

对于人工智能领域短板的看法,辛顿说:“很多概念性的突破必将接踵而至,但我们同样也需要进行大规模且有成效的性能提升。”

对于神经网络不足之处的看法,辛顿说:“含有大量突触的神经网络非常善于处理数据量较小的任务,但是人类自己在这方面更胜一筹。”

对于人类大脑工作方式的看法,辛顿说:“人的大脑内遍布神经活动的重要载体。”

现代人工智能革命起源于一场不起眼的研究竞赛。在 2012 年的第三届 ImageNet 大赛上,参赛团队要设计出一种能够识别 1000 种事物的计算机视觉系统,这些事物包括动物、自然景观以及人类等。

在最初的两届比赛中,最优秀团队的准确率也达不到 75%。但在第三年,一名教授和他的两个学生却在短时间内突破了技术的天花板。他们以令人震惊的 10.8 个百分点优势赢得了比赛。这名教授就是杰弗里・辛顿,而他们所使用的技术被称作深度学习。

在2019年,鉴于辛顿对人工智能领域的开创性贡献,他与扬・勒丘恩、约书亚・本吉奥等人工智能先驱一道被授予图灵奖。2020年10 月 20 日,媒体与辛顿在科技峰会上,就人工智能领域的现状以及未来的发展方向进行了交流。

媒体:您为何如此确信深度学习将会复制人类的智慧?

Geoffrey Hinton:我确实相信深度学习能做任何事,但目前还需要取得一些概念性突破才能实现这一点。例如,2017 年阿施施・瓦斯瓦尼等人的论文介绍了一种转换器,它可以很好地表达词语的意思。这就是一种概念性突破。现在,几乎所有功能较为强大的自然语言处理系统都在使用这种技术。我们需要更多像这样的突破性技术。

媒体:如果我们取得了这样的技术突破,那么深度学习会接近于人类的智能吗?

Geoffrey Hinton:是的。当神经活动的重要载体可以进行像推理这样的行为时,意味着我们已经取得了非常重要的突破。但在规模上,我们仍然需要获得巨大的提升。人脑约有 100 万亿个参数,或者说神经突触。而现在像 GPT-3 这样的可以被称作大型模型的程序,只有 1750 亿个神经突触。人脑神经突触的数量是它的上千倍。目前,GPT-3 可以生成看起来十分合理的话语。但与人脑相比,其生成量依然微不足道。

媒体:当您谈到规模这个概念时,您指的是更庞大的神经网络,还是更多的数据,又或者是两者兼具?

Geoffrey Hinton:两者都有。计算机科学和人类行为之间存在着某种差异。相比他们所接收到的数据量而言,人类拥有大量的神经突触,而含有大量神经突触的神经网络却更善于处理数据量较小的任务。不过,在这一方面,人类更胜一筹。

媒体:人工智能领域的许多专家都认为,具备常识是下一个需要解决的问题。您同意这种观点吗?

Geoffrey Hinton:我同意他们的观点,这是一项非常重要的问题。我还认为电机控制是一个非常重要的领域,而现在深度神经网络在这一方面能做的非常好。尤其在谷歌最近的研究中,你可以将精准的电机控制与语言结合起来,这样就能完成打开抽屉并从中取出一个积木的动作,而且系统还会用自然语言告诉你它正在做什么。

对于 GPT-3 这样的可以生成接近完美人类语句的模型来说,想要生成语句就必须先理解大量语句的含义,但是它到底能理解多少,我们并不是十分清楚。也许AI完全不需要去理解语言。然而,如果某个东西打开了抽屉并取出了一个积木,同时还说道,“我刚刚打开了一个抽屉,取出了一个积木”,那么它很有可能明白自己在干什么。

媒体:人工智能领域一直将人脑当作其最大的灵感来源,而且人工智能技术的不同方法也源于认知科学中的不同理论。您认为人脑构建出外部世界的表现,是为了去理解它,还是这只是一种去思考它的有用方法?

Geoffrey Hinton:在很久之前,认知科学领域里的两个思想学派之间发生了一场辩论。其中一派以斯蒂芬・科斯林为代表,认为当人类在脑中操纵视觉图像时,会得到一组可以任意移动的像素阵列。而另一派的思想则更加接近于传统的人工智能方向。他们认为,“不不不,这纯属胡说八道。它应该是一种具有层次性和结构性的描述。人的意识中会形成一个符号性的结构,而它才是被意识所操控的东西。”

我认为他们都犯了相同的错误。科斯林认为,由于外部图像是由像素构成的,而它们反应了我们所理解的内容,所以我们就可以操纵这些像素。而符号表征派学者认为,因为我们同样可以用符号表征的方法来表现我们所理解的事物,所以我们就可以操纵这些符号。但他们其实都犯了一样的错误。人的大脑内其实充满了神经活动的重要载体。

媒体:许多人依然认为符号性表征是人工智能技术所采用的方法之一。对此您怎么看?

Geoffrey Hinton:你说的没错。我的好朋友赫克托・莱维斯克就认为符号性方法在人工智能领域发挥了重要作用。我虽然并不认同他的看法,但非常合理的符号性方法确实值得一试。然而,我的最终猜想是,我们会认识存在于外部世界中的符号,而且还会使用重要载体进行内部的运算。

媒体:对于未来人工智能的发展,您认为您最与众不同的观点是什么?

Geoffrey Hinton:我想我的叛逆观点将会在五年之后成为主流观点。我在八十年代所提出的大多数离经叛道的想法现在已经被大家接受了,而且很难找到不认同这些想法的人。所以说,现在我觉得我那些观点已经没那么与众不同了

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
23岁门外汉携ChatGPT,攻克60年数学猜想!陶哲轩:我们全走偏了..
编辑:桃子【新智元导读】7年的专业研究,输给了一次「vibe mathing」。..
ChatGPT Images 2.0突然发布,排版设计能力巨大提升
(文/万肇生 编辑/张广凯) 当地时间4月21日,美国人工智能公司OpenAI对..
2026年实用指南:ChatGPT 5.4国内访问方式与高效使用全攻略..
如果你想在国内更顺畅地体验 ChatGPT 5.4 的能力,目前一种比较省事的思..
哈萨比斯:ChatGPT把AI带上了“邪路”
(本文作者为 字母AI,钛媒体经授权发布)文 | 字母AI我们可能用一个聊天..
Deepseek V4实测数据分析,这些任务就DSV4就稳了
今天DeepSeek V4 一发布,整个 AI 圈跟过年似的。我看了一圈网上的讨论,..
DeepSeek V4炸场背后:硅谷在“造墙”,中国在“修路”..
硅谷巨头闭源互撕:OpenAI与Anthropic互相揭老底、抢风头、贴脸开大。中..
DeepSeek V4 全面实测:100 万超长上下文 + 1.6T 编码能力反超 Claude..
一、全网实测出炉!DeepSeek V4 强势登场打破 AI 格局当下全球大模型行业..
Deepseek V4实测总结:长上下文普惠先锋,国产AI喜忧参半..
Deepseek V4作为国产开源大模型新势力,性能介于Claude Sonnet 4.5 - 4.6..
DeepSeek API又降价了,输入缓存价格仅为GPT-5.5的七百分之一..
4月26日晚间,DeepSeek官网宣布全系API服务输入缓存命中价格降至原有价格..
关于作者
横道不笑(普通会员)
文章
1994
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40418 企业收录2986 印章生成263660 电子证书1157 电子名片68 自媒体105962

0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索