当前位置:首页 > 科技  > 数码

2080亿晶体管、1700W功耗!黄仁勋抛出了真正的战术核弹

来源: 责编: 时间:2024-03-20 08:49:33 343观看
导读 快科技3月19日消息,今天凌晨,黄仁勋正式拿出了新一代Blackwell GPU架构,以及基于此的B100/B200 GPU芯片、GB200超级芯片、DGX超级计算机,再次将“战术核弹”提升了全新的境界,傲视全球。Blackwell B200 GPU首次

快科技3月19日消息,今天凌晨,黄仁勋正式拿出了新一代Blackwell GPU架构,以及基于此的B100/B200 GPU芯片、GB200超级芯片、DGX超级计算机,再次将“战术核弹”提升了全新的境界,傲视全球。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

Blackwell B200 GPU首次采用了chiplet晶粒封装,包含两颗B100,而B200之间再通过带宽翻倍达1.8TB/s的第五代NVLink 5总线互连,多可连接576块。f8G28资讯网——每日最新资讯28at.com

B100采用专门定制的台积电4NP工艺制造(H100/RTX 40 4N工艺的增强版),已经达到双倍光刻极限尺寸,彼此通过10TB/s带宽的片间互联带宽,连接成一块统一的B200 GPU。f8G28资讯网——每日最新资讯28at.com

B100集成多达1040亿个晶体管,比上代H100 800亿个增加了足足30%,B200整体就是2080亿个晶体管。f8G28资讯网——每日最新资讯28at.com

核心面积未公布,考虑到工艺极限应该不会比814平方毫米的H100大太多。f8G28资讯网——每日最新资讯28at.com

CUDA核心数量也没说,但肯定会大大超过H100 16896个,不知道能不能突破2万个?f8G28资讯网——每日最新资讯28at.com

每颗B100连接四颗24GB HBM3E显存/内存,等效频率8GHz,位宽4096-bit,带宽达4TB/s。f8G28资讯网——每日最新资讯28at.com

如此一来,B200就有多达192GB HBM3E,总位宽8096-bit,总带宽8TB/s,相比H100分别增加1.4倍、58%、1.4倍。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

性能方面,B200新增支持FP4 Tensor数据格式,性能达到9PFlops(每秒9千万亿次),INT/FP8、FP16、TF32 Tensor性能分别达到4.5、2.25、1.1PFlops,分别提升1.2倍、1.3倍、1.3倍,但是FP64 Tensor性能反而下降了40%(依赖GB200),FP32、FP64 Vector性能则未公布。f8G28资讯网——每日最新资讯28at.com

Blackwell GPU还支持第二代Transformer引擎,支持全新的微张量缩放,在搭配TensorRT-LLM、NeMo Megatron框架中的先进动态范围管理算法,从而在新型4位浮点AI推理能力下实现算力和模型大小的翻倍。f8G28资讯网——每日最新资讯28at.com

其他还有RAS可靠性专用引擎、安全AI、解压缩引擎等。f8G28资讯网——每日最新资讯28at.com

至于功耗,B100控制在700W,和上代H100完全一致,B200则首次达到了1000W。f8G28资讯网——每日最新资讯28at.com

NVIDIA宣称,Blackwell GPU能够在10万亿参数的大模型上实现AI训练和实时大语言模型推理。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

GB200 Grace Blackwell是继Grace Hopper之后的新一代超级芯片(Superchip),从单颗GPU+单颗CPU升级为两颗GPU加一颗CPU,其中GPU部分就是B200,CPU部分不变还是Grace,彼此通过900GB/s的带宽实现超低功耗片间互联。f8G28资讯网——每日最新资讯28at.com

在大语言模型推理工作负载方面,GB200超级芯片的性能对比H100提升了多达30倍。f8G28资讯网——每日最新资讯28at.com

不过代价也很大,GB200的功耗高可达2700W,可以使用风冷,更推荐使用液冷。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

基于GB200超级芯片,NVIDIA打造了新一代的AI超级计算机“DGX SuperPOD”,配备36块超级芯片,也就是包含36颗Grace CPU、72颗B200 GPU,彼此通过NVLink 5组合在一起,还有多达240TB HBM3E。f8G28资讯网——每日最新资讯28at.com

这台AI超级计算机可以处理万亿参数的大模型,能保证超大规模生成式AI训练和推理工作负载的持续运行,FP4精度下的性能高达11.5EFlops(每秒1150亿亿次)。f8G28资讯网——每日最新资讯28at.com

DGX SuperPOD还具有极强的扩展性,可通过Quantum-X800 InfiniBand网络连接,扩展到数万颗GB200超级芯片,并加入BlueField-3 DPU数据处理单元,而每颗GPU都能获得1.8TB/s的高带宽。f8G28资讯网——每日最新资讯28at.com

第四代可扩展分层聚合和规约协议(SHARP)技术,可提供14.4TFlops的网络计算能力,比上代提升4倍。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

此外,NVIDIA还发布了第六代通用AI超级计算平台“DGX B200”,包含两颗Intel五代至强处理器、八颗B200 GPU,具备1.4TB HBM3E、64TB/s带宽,FP4精度性能144PFlops(每秒14亿亿次),万亿参数模型实时推理速度提升15倍。f8G28资讯网——每日最新资讯28at.com

DGX B200系统还集成八个NVIDIA ConnectX-7网卡、两个BlueField-3 DPU高性能网络,每个连接带宽高达400Gb/s,可通过Quantum-2 InfiniBand、Spectrum?-X以太网网络平台,扩展支持更高的AI性能。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

基于Blackwell GPU的产品将在今年晚些时候陆续上市,亚马逊云、戴尔、谷歌、Meta、微软、OpenAI、甲骨文、特斯拉、xAI等都会采纳。f8G28资讯网——每日最新资讯28at.com

亚马逊云、谷歌云、微软Azeure、甲骨文云将是首批提供Blackwell GPU驱动实例的云服务提供商,NVIDIA云合作伙伴计划的中的Applied Digital、CoreWeave、Crusoe、IBM Cloud、Lambda也将提供上述服务。f8G28资讯网——每日最新资讯28at.com

Indosat Ooredoo Hutchinson、Nebius、Nexgen Cloud、甲骨文欧盟主权云、甲骨文美国/英国/澳大利亚政府云、Scaleway、新加坡电信、Northern Data Group旗下的Taiga Cloud、Yotta Data Services旗下的Shakti Cloud、YTL Power International 等主权AI云,也将提供基于Blackwell架构的云服务和基础设施。f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

黄仁勋抛出2700W功耗的真核弹!还有240TB显存的AI超级计算机f8G28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-24-77901-0.html2080亿晶体管、1700W功耗!黄仁勋抛出了真正的战术核弹

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: NVIDIA造了个2080亿晶体管的怪物:FP4性能高达4亿亿次每秒

下一篇: 全白高颜值小板!七彩虹CVN B650M GAMING FROZEN V14战列舰评测:8000MHz内存稳定 核显创纪录

标签:
  • 热门焦点
  • 小米平板5 Pro 12.4简评:多专多能 兼顾影音娱乐的大屏利器

    疫情带来了网课,网课盘活了安卓平板,安卓平板市场虽然中途停滞了几年,但好的一点就是停滞的这几年行业又有了新的发展方向,例如超窄边框、高刷新率、多摄镜头组合等,这就让安卓
  • 三言两语说透设计模式的艺术-简单工厂模式

    一、写在前面工厂模式是最常见的一种创建型设计模式,通常说的工厂模式指的是工厂方法模式,是使用频率最高的工厂模式。简单工厂模式又称为静态工厂方法模式,不属于GoF 23种设计
  • 十个可以手动编写的 JavaScript 数组 API

    JavaScript 中有很多API,使用得当,会很方便,省力不少。 你知道它的原理吗? 今天这篇文章,我们将对它们进行一次小总结。现在开始吧。1.forEach()forEach()用于遍历数组接收一参
  • 从 Pulsar Client 的原理到它的监控面板

    背景前段时间业务团队偶尔会碰到一些 Pulsar 使用的问题,比如消息阻塞不消费了、生产者消息发送缓慢等各种问题。虽然我们有个监控页面可以根据 topic 维度查看他的发送状态,
  • 一篇聊聊Go错误封装机制

    %w 是用于错误包装(Error Wrapping)的格式化动词。它是用于 fmt.Errorf 和 fmt.Sprintf 函数中的一个特殊格式化动词,用于将一个错误(或其他可打印的值)包装在一个新的错误中。使
  • 三万字盘点 Spring 九大核心基础功能

    大家好,我是三友~~今天来跟大家聊一聊Spring的9大核心基础功能。话不多说,先上目录:图片友情提示,本文过长,建议收藏,嘿嘿嘿!一、资源管理资源管理是Spring的一个核心的基础功能,不
  • Temu起诉SHEIN,跨境电商战事升级

    来源 | 伯虎财经(bohuFN)作者 | 陈平安日前据外媒报道,拼多多旗下跨境电商平台Temu正对竞争对手SHEIN提起新诉讼,诉状称Shein“利用市场支配力量强迫服装厂商与之签订独家
  • OPPO K11搭载长寿版100W超级闪充:26分钟充满100%

    据此前官方宣布,OPPO将于7月25日也就是今天下午14:30举办新品发布会,届时全新的OPPO K11将正式与大家见面,将主打旗舰影像,和同档位竞品相比,其最大的卖
  • 北京:科技教育体验基地开始登记

      北京“科技馆之城”科技教育体验基地登记和认证工作日前启动。首批北京科技教育体验基地拟于2023年全国科普日期间挂牌,后续还将开展常态化登记。  北京科技教育体验基
Top