微软斥资数百万美元打造了 ChatGPT 所基于的超级计算机。

微软

微软宣布推出新的功能强大且高度可扩展的虚拟机,这些虚拟机集成了最新的 NVIDIA H100 Tensor Core GPU 和 NVIDIA Quantum-2 InfiniBand 网络。

微软斥资数亿美元 的建设 一个巨大的超级计算机来帮助驱动 OpenAI ChatGPT 聊天机器人, 在一份报告中,微软解释了它如何构建 OpenAI 使用的强大的 Azure AI 基础设施,以及它的系统如何变得更加强大。

为了构建支持 OpenAI 项目的超级计算机,Microsoft 声称已连接数以千计的 图形处理单元 (GPU) NVIDIA 到其 Azure 云计算平台。 这反过来又让 OpenAI 能够训练越来越强大的模型,并“解锁 AI 能力”的工具,如 ChatGPT 和 Bing。

斯科特格思里, 微软人工智能和云副总裁, 称该公司在该项目上花费了数亿美元,根据一份声明。 虽然这对于最近扩大了对 OpenAI 的数十亿美元、多年期投资的微软来说似乎只是杯水车薪,但它肯定 这表明它准备在 AI 领域投入更多资金。

微软投资时 1亿美元 在 2019 年的 OpenAI 上,同意建造一台大型超级计算机 以及启动人工智能研究的最新技术。 唯一的问题是:微软没有 OpenAI 需要的任何东西,并且不完全确定它可以在不破坏它的情况下在其 Azure 云服务上构建这么大的东西。

OpenAI 试图训练一组不断增长的称为模型的人工智能程序,这些程序吸收了更大量的数据并学习了越来越多的参数,即 AI 系统通过训练和再训练发现的变量。 这意味着 OpenAI 需要长期访问强大的云计算服务。

为了应对这一挑战, 微软不得不想方设法连接数以万计的图形芯片 NVIDIA A100 并改变您放置服务器的方式以避免断电。

“我们构建了一个可以大规模运行且可靠的系统架构。 这就是让 ChatGPT 成为可能的原因,”微软 Azure AI 基础设施总经理 Nidhi Chappell 说。 “这是一种来自那里的模式。 还会有很多很多。”

该技术让 OpenAI 推出了 ChatGPT,这款病毒式聊天机器人在 XNUMX 月 IPO 后的几天内吸引了超过 XNUMX 万用户,现在正被吸收到其他公司的商业模式中,包括亿万富翁对冲基金创始人肯格里芬在交货时间。

随着 ChatGPT 等生成式 AI 工具获得企业和消费者的兴趣,微软、亚马逊和谷歌等云服务提供商将面临越来越大的压力,以确保其数据中心能够提供所需的巨大计算能力。

现在,微软正在使用它为 OpenAI 构建的同一组资源来训练和运行自己的优秀 AI 模型,包括上个月推出的新 Bing 搜索机器人。 该公司还向其他客户销售该系统。 这家软件巨头已经在研发下一代 AI 超级计算机,这是与 OpenAI 扩大交易的一部分,微软在其中增加了 10 亿美元的投资。

“我们不会将它们构建为定制的东西; 它最初是一些定制的东西,但我们始终以一种通用化的方式构建它,以便任何想要训练大型语言模型的人都可以利用相同的改进。” 格思里在接受采访时说。 “它确实帮助我们成为了一个更好的 AI 整体云。”

训练一个海量的 AI 模型需要大量的图形处理单元连接在一个地方,就像微软组装的 AI 超级计算机。 使用模型后,回答用户提出的所有问题(称为推理)需要略有不同的设置。 微软还部署了用于推理的图形芯片,但这些处理器(数十万个)在地理上分散在公司 60 多个数据中心区域。 现在,该公司正在添加用于 AI 工作负载的最新 NVIDIA 图形芯片 (H100) 和最新版本的 NVIDIA Infiniband 网络技术,以实现更快的数据共享。

微软决定合作 与开放人工智能 建立在这样一种信念之上,即这种前所未有的基础设施规模将产生结果 (新的 AI 功能,一种新型的编程平台),微软可以将其转化为能够为客户带来真正利益的产品和服务,Waymouth 说。 这种信念激发了公司克服所有技术挑战以构建它并继续突破 AI 超级计算边界的雄心。

数据来源: https://news.microsoft.com/


发表您的评论

您的电子邮件地址将不会被发表。 必填字段标有 *

*

*

  1. 负责资料:AB Internet Networks 2008 SL
  2. 数据用途:控制垃圾邮件,注释管理。
  3. 合法性:您的同意
  4. 数据通讯:除非有法律义务,否则不会将数据传达给第三方。
  5. 数据存储:Occentus Networks(EU)托管的数据库
  6. 权利:您可以随时限制,恢复和删除您的信息。

  1.   莱昂纳多

    我想知道这什么时候成为现实世界上的失业人数,我们正在自杀