英伟达最新AI超级算力Blackwell GPU平台即将登陆亚马逊云科技

2024-03-19 发布 · 浏览132次 · 点赞0次 · 收藏0次

今天凌晨,英伟达在 GTC 大会上推出了最新一代 GPU 架构 Blackwell 及整套系统。在 Keynote 上,黄仁勋表示,已有多家科技公司和传统企业正在引入新一代产品。

在发布活动后,亚马逊云科技宣布将提供基于英伟达 Grace Blackwell GPU 的 Amazon EC2 实例和 英伟达 DGX Cloud,以提高在数万亿参数 LLM 上构建和运行推理的性能。

亚马逊云科技表示,英伟达的超强算力芯片系统与亚马逊云科技强大的 Elastic Fabric Adapte (EFA) 网络连接能力、高级虚拟化 ( Amazon Nitro System ) 和超大规模集群 ( Amazon EC2 UltraClusters ) 等领先技术的结合,使得该平台在加速资源密集型、数万亿参数语言模型的推理工作负载方面实现了巨大飞跃。

在安全性方面,亚马逊云科技的 Nitro 系统、Amazon KMS、EFA 加密 和 Blackwell 加密的集成将为客户提供对其训练数据和模型权重的端到端控制,从而为客户在亚马逊云科技上的生成式 AI 应用程序提供更强的安全性。

Blackwell 也加入了双方合作的 Project Ceiba 项目,该项目专为 NVIDIA 自身的 AI 研发工作设计,是一台亚马逊云科技上托管的采用 DGX Cloud 的 AI 超级计算机,它搭载了 20,736 颗 GB200 Superchips 芯片,并通过第四代 EFA 网络扩展,为每个 Superchip 提供高达 800 Gbps 的低延迟、高带宽网络吞吐量,能够提供 414 exaflops 的计算能力,与之前计划在 Hopper 架构上构建 Ceiba 相比,性能提升了 6 倍。

英伟达最新AI超级算力Blackwell GPU平台即将登陆亚马逊云科技 - AI 资讯 - 资讯 - AI 中文社区

声明:本文转载自机器之心,转载目的在于传递更多信息,并不代表本社区赞同其观点和对其真实性负责,本文只提供参考并不构成任何建议,若有版权等问题,点击这里。本站拥有对此声明的最终解释权。如涉及作品内容、版权和其它问题,请联系我们删除,我方收到通知后第一时间删除内容。

点赞(0) 收藏(0)
0条评论
珍惜第一个评论,它能得到比较好的回应。
评论

游客
登录后再评论
  • 鸟过留鸣,人过留评。
  • 和谐社区,和谐点评。