当前位置:首页 > 科技  > 数码

八路达成1.1TB HBM3e内存!NVIDIA奉上全球第一GPU H200

来源: 责编: 时间:2023-11-14 17:08:45 334观看
导读 NVIDIA GPU已经在AI、HPC领域遥遥领先,但没有强,只有更强。现在,NVIDIA又发布了全新的HGX H200加速器,可处理AIGC、HPC工作负载的海量数据。NVIDIA H200的一大特点就是首发新一代HBM3e高带宽内存(疑似来自SK海

NVIDIA GPU已经在AI、HPC领域遥遥领先,但没有强,只有更强。tFH28资讯网——每日最新资讯28at.com

现在,NVIDIA又发布了全新的HGX H200加速器,可处理AIGC、HPC工作负载的海量数据。tFH28资讯网——每日最新资讯28at.com

八路达成1.1TB HBM3e内存!NVIDIA奉上全球第一GPU H200tFH28资讯网——每日最新资讯28at.com

NVIDIA H200的一大特点就是首发新一代HBM3e高带宽内存(疑似来自SK海力士),单颗容量就多达141GB(原始容量144GB但为提高良率屏蔽了一点点),同时带宽多达4.8TB/s。tFH28资讯网——每日最新资讯28at.com

对比H100,容量增加了76%,带宽增加了43%,而对比上代A100,更是容量几乎翻番,带宽增加2.4倍。tFH28资讯网——每日最新资讯28at.com

得益于NVLink、NVSwitch高速互连技术,H200还可以四路、八路并联,因此单系统的HBM3e内存容量能做到多1128GB,也就是1.1TB。tFH28资讯网——每日最新资讯28at.com

只是相比于AMD Instinct MI300X还差点意思,后者搭载了192GB HBM3,带宽高达5.2TB/s。tFH28资讯网——每日最新资讯28at.com

八路达成1.1TB HBM3e内存!NVIDIA奉上全球第一GPU H200tFH28资讯网——每日最新资讯28at.com

性能方面,H200再一次实现了飞跃,700亿参数的Llama2大语言模型推理性能比H100提高了多达90%,1750亿参数的GTP-3模型推理性能也提高了60%,而对比前代A100 HPC模拟性能直接翻番。tFH28资讯网——每日最新资讯28at.com

八路H200系统下,FP8深度学习计算性能可以超过32PFlops,也就是每秒3.2亿亿次浮点计算,堪比一台大型超级计算机。tFH28资讯网——每日最新资讯28at.com

随着未来软件的持续升级,H200还有望继续释放潜力,实现更大的性能优势。tFH28资讯网——每日最新资讯28at.com

此外,H200还可以与采用超高速NVLink-C2C互连技术的NVIDIA Grace CPU处理器搭配使用,就组成了GH200 Grace Hopper超级芯片,专为大型HPC、AI应用而设计的计算模块。tFH28资讯网——每日最新资讯28at.com

NVIDIA H200将从2024年第二季度开始通过全球系统制造商、云服务提供商提供。tFH28资讯网——每日最新资讯28at.com

八路达成1.1TB HBM3e内存!NVIDIA奉上全球第一GPU H200tFH28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-24-24701-0.html八路达成1.1TB HBM3e内存!NVIDIA奉上全球第一GPU H200

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 联想发布ThinkStation P8工作站:顶配锐龙96核心CPU

下一篇: 强大模型训练芯片H200发布!141G大内存 AI推理高提升90%

标签:
  • 热门焦点
  • Rust中的高吞吐量流处理

    作者 | Noz编译 | 王瑞平本篇文章主要介绍了Rust中流处理的概念、方法和优化。作者不仅介绍了流处理的基本概念以及Rust中常用的流处理库,还使用这些库实现了一个流处理程序
  • 三言两语说透柯里化和反柯里化

    JavaScript中的柯里化(Currying)和反柯里化(Uncurrying)是两种很有用的技术,可以帮助我们写出更加优雅、泛用的函数。本文将首先介绍柯里化和反柯里化的概念、实现原理和应用
  • 自动化在DevOps中的力量:简化软件开发和交付

    自动化在DevOps中扮演着重要角色,它提升了DevOps的效能。通过自动化工具和方法,DevOps团队可以实现以下目标:消除手动和重复性任务。简化流程。在整个软件开发生命周期中实现更
  • 虚拟键盘 API 的妙用

    你是否在遇到过这样的问题:移动设备上有一个固定元素,当激活虚拟键盘时,该元素被隐藏在了键盘下方?多年来,这一直是 Web 上的默认行为,在本文中,我们将探讨这个问题、为什么会发生
  • 2023年,我眼中的字节跳动

    此时此刻(2023年7月),字节跳动从未上市,也从未公布过任何官方的上市计划;但是这并不妨碍它成为中国最受关注的互联网公司之一。从2016-17年的抖音强势崛起,到2018年的“头腾
  • 自律,给不了Keep自由!

    来源 | 互联网品牌官作者 | 李大为编排 | 又耳 审核 | 谷晓辉自律能不能给用户自由暂时不好说,但大概率不能给Keep自由。近日,全球最大的在线健身平台Keep正式登陆港交所,努力
  • 苹果公司要求三星和LG Display生产「无边框」OLED iPhone显示屏

    据 The Elec 报道,苹果已要求其供应商为未来的 iPhone 型号开发「无边框」OLED 显示面板。苹果显然已要求三星和 LG Display 开发新的 OLED 显示面
  • 三星Galaxy Z Fold/Flip 5国行售价曝光 :最低7499元/12999元起

    据官方此前宣布,三星将于7月26日也就是明天在韩国首尔举办Unpacked活动,届时将带来带来包括Galaxy Buds 3、Galaxy Watch 6、Galaxy Tab S9、Galaxy
  • 7月4日见!iQOO 11S官宣:“鸡血版”骁龙8 Gen2+200W快充加持

    上半年已接近尾声,截至目前各大品牌旗下的顶级旗舰都已悉数亮相,而下半年即将推出的顶级旗舰已经成为了数码圈爆料的主流,其中就包括全新的iQOO 11S系
Top