作者 | 徐杰承

审校 | 云昭

​100万亿，这个数字究竟有多大？假如你拥有每天都能中500万彩票的超能力，那么在不吃不喝存下所有钱的情况下，你还需要拥有约5500年的寿命，才能够攒下100万亿的财产。然而，今天想要和大家聊的这100万亿，背后并不是“RMB”、“Dollor”这些令人垂涎的单位。这里的100万亿，指的是由众多硅谷科技大亨共同创立的人工智能研究公司OpenAI即将发布的第四代生成式预训练Transformer——GPT-4所拥有的参数量。

为了方便大家更加直观的理解这个数据，我们可以用人脑与GPT-4进行对比。一般情况下，一个正常人类的大脑约有800—1000亿个神经元，以及约100万亿个突触。而这些神经元与突触，几乎直接控制着一个人百年人生中的所有思想、判断及行为，而GPT-4拥有与人脑突触一样多的参数。那么，如此庞大规模的密集神经网络究竟具备着怎样的潜力；GPT-4的出现将会给我们的带来哪些惊喜；我们又是否已经真的具备制造人脑的能力了呢？

图源：推特

在性能方面，OpenAI的大力似乎真的带来了一些奇迹。除了理解能力外，GPT-2在生成方面第一次表现出了强大的天赋：阅读摘要、聊天、续写、编故事，甚至生成假新闻、钓鱼邮件或在网上扮演他人通通不在话下。在“变得更大”之后，GPT-2的确展现出了一些列普适而强大的能力，并在多个特定的语言建模任务上实现了彼时的最佳性能。也难怪当时OpenAI曾表示“GPT-2 was too dangerous to release”。

自GPT-2取得成功以来，OpenAI对“大力神教”的信仰愈发坚定，2020年放出的GPT-3继续沿用微创新、猛扩大的发展思路。除了GPT-3中的Transformer应用了Sparse结构外，GPT-3与GPT-2的结构几乎没有区别。而在“大力”方面，GPT-3的模型上到了96层，训练参数则是达到了1750亿个（GPT-2的10倍以上）。

图源：网络

虽然图灵测试并不是AI技术的绝对参考点，但作为迄今为止最久远、最广为人知的AI技术测试，图灵测试仍然有着很大的象征意义。如果GPT-4真的正式且肯定的通过了图灵测试，那么它将极有可能创造迄今为止AI界最大的一座里程碑。

除此之外，与GPT-3不同的是，GPT-4将很有可能不仅只是一个语言模型。OpenAI首席科学家Ilya Sutskever曾在其撰写的多模态相关文章中暗示过这一点——“文字本身即可表达关于这个世界的大量信息，但毕竟是不完整的，因为我们也生活在视觉世界之中。”因此，业界部分专家认为GPT-4将会是多模态的，可以接受音频、文本、图像甚至是视频输入，并预测OpenAI的Whisper的音频数据集将用于创建GPT-4所需的文本数据。这也意味着GPT-4对于外界信息的接收与处理将不会再有任何局限性。

而工业界关注GPT-4的原因，则很有可能是由于GPT-4的实际商用门槛将比传统GPT-3更低。此前由于巨额费用和基础设施原因而未能使用相关技术的企业也将有望使用GPT-4。目前GPT-4已进入上市的最后阶段，将于今年12月至明年2月期间发布。剑桥AI研究公司分析师Alberto Garcia通发表了博客并预测：“GPT-4将更专注于优化数据处理，因此GPT-4的学习成本预计将低于GPT-3。GPT-4的每集学习成本将可能由GPT-3的数百万美元将至100万美元左右”。

如果以上信息全部属实，那么此刻我们可以预见，随着GPT-4的发布，明年深度学习研究领域将迎来一轮新的热潮；各个行业中将可能出现大量更加高级、更加自然且几乎无法辨别其身份真伪的聊天服务机器人；在此基础上，也将会有更多高质量的个性化AI服务从不同的传统业务中诞生；我们也将极有可能第一次实现与认知智能的无障碍交流。

再说回开篇提到的制造人脑或者说模拟人脑的问题。据MIT的一项研究显示，虽然GPT-3中的神经网络并没有试图直接模仿人类大脑，但GPT-3所呈现出的语言处理方式与人类大脑进化过程所得到的解决方案存在一定的相似性，当向模型输入与测试人脑相同的刺激时，模型获得了与人脑同类型的激活，且在40余种语言模型测试中，GPT-3几乎做出了完美的推断，这些模型的基本功能的确类似于人类大脑语言处理中心的功能。对此，斯坦福大学心理学和计算机科学助理教授Daniel Yamins也表示：“人工智能网络并没有直接模仿大脑，但最终看起来却像大脑一样，这在某种意义上表明，人工智能和自然之间似乎发生了某种趋同演化”。

图源：推特

https://dzone.com/articles/what-can-you-do-with-the-openai-gpt-3-language-mod

https://analyticsindiamag.com/gpt-4-is-almost-here-and-it-looks-better-than-anything-else/

https://analyticsindiamag.com/openais-whisper-might-hold-the-key-to-gpt4/

责任编辑：武晓燕来源： 51CTO技术栈