微软Azure高性能计算和人工智能产品负责人Nidhi Chappell（左）和微软战略合作伙伴关系高级总监Phil Waymouth（右）

为了构建支持OpenAI项目的超级计算机，它斥资数亿美元，在Azure云计算平台上将几万个Nvidia A100芯片连接在一起，并改造了服务器机架。

此外，为了给OpenAI量身打造这个超算平台，微软十分尽心，一直在密切关注着OpenAI的需求，随时了解他们在训练AI时最关键的需要。

这么一个大工程，成本究竟是多少呢？微软负责云计算和人工智能的执行副总裁Scott Guthrie不愿透露具体数目，但他表示，「可能不止」几亿美元。

随着AI研究人员开始使用更强大的GPU来处理更复杂的AI工作负载，他们看到了AI模型更大的潜力，这些模型可以很好地理解细微差别，从而能够同时处理许多不同的语言任务。

简单来说，模型越大，你拥有的数据越多，你能训练的时间越长，模型的准确性就越好。

但是这些更大的模型很快就会到达现有计算资源的边界。而微软明白，OpenAI需要的超级计算机是什么样子，需要多大的规模。

这显然不是说，单纯地购买一大堆GPU并将它们连接在一起之后，就可以开始协同工作的东西。

微软AI平台公司副总裁Eric Boyd表示，这种为大型语言模型训练和下一波AI创新而优化的超算能力，已经可以在Azure云服务中直接获得。

并且微软通过与OpenAI的合作，积累了大量经验，当其他合作方找来、想要同样的基础设施时，微软也可以提供。

现在，微软的Azure数据中心已经覆盖了全球60多个地区。

全新虚拟机：ND H100 v5

在上面这个基础架构上，微软一直在继续改进。

今天，微软就官宣了全新的可大规模扩展虚拟机，这些虚拟机集成了最新的NVIDIA H100 Tensor Core GPU 和 NVIDIA Quantum-2 InfiniBand 网络。

通过虚拟机，微软可以向客户提供基础设施，根据任何AI任务的规模进行扩展。据微软称，Azure的新ND H100 v5 虚拟机为开发者提供卓越的性能，同时调用数千个GPU。

参考资料：