当前位置:首页 > 科技  > 芯片

NVIDIA在生成式AI训练基准测试中技压群雄

来源: 责编: 时间:2023-11-19 10:30:56 418观看
导读全球最具公信力的人工智能(AI)基准测试MLPerf已进入生成式AI(Generative AI)时代。NVIDIA凭借其强大的GPU系统在最新的生成式AI训练基准测试中取得了领先的地位,而英特尔(Intel)和Google也在测试中展示了他们的实力。在2023

全球最具公信力的人工智能(AI)基准测试MLPerf已进入生成式AI(Generative AI)时代。NVIDIA凭借其强大的GPU系统在最新的生成式AI训练基准测试中取得了领先的地位,而英特尔(Intel)和Google也在测试中展示了他们的实力。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

在2023年早些时候,MLPerf新增了大型语言模型(LLM)训练基准测试,特别是针对GPT-3。而在11月,MLPerf又新增了文字转影像生成器Stable Diffusion基准测试。这些基准测试都是针对生成式AI的,要求参与者在强大的计算系统上完成训练。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

在这个测试中,NVIDIA凭借其HGX H100系统取得了最佳的成绩。HGX H100系统是一个超级电脑,搭载了1万颗GPU。名为Eos的NVIDIA系统仅用了不到4分钟就完成了所有的GPT-3训练基准测试。微软(Microsoft)Azure用相同大小的系统测试,完成时间也只落后了几秒钟。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

英特尔也参与了这个基准测试,他们使用了搭载Gaudi 2加速芯片的系统以及仅搭载第4代Xeon处理器的系统。英特尔启用了Gaudi 2的8位元浮点(FP8)功能,这在部分GPT-3和其他Transformer神经网络中使用,其低精度不会影响精度。测试结果显示,Gaudi 2系统的单芯片速度略低于NVIDIA系统约三分之一,但它是Google TPUv5e的3倍。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

英特尔Habana Labs营运长Eitan Medina表示,他们预估FP8将带来90%的增益,而实际测试中,384个加速器的丛集将训练时间缩短了103%。他还指出,Gaudi 2的价格明显低于H100,因此在价格和效能的综合指标上具有优势。随着Gaudi 3在2024年的推出,此优势将进一步增强。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

除了这些大公司,也有一些仅搭载CPU的系统参与了基准测试。这些系统在几个基准测试的训练时间介于几分钟到几小时之间。除了MLPerf基准测试外,英特尔还分享了一些数据,显示包含AMX矩阵引擎的4节点Xeon系统能在不到5分钟内微调Stable Diffusion影像生成器。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

据报道,共有19家企业和机构提交了超过200份测试结果,显示了AI训练的快速发展。这些提交结果的平均效能较过去5个月增加了2.8倍,比MLPerf开始测试5年来增加了49倍。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

这个基准测试展示了各大公司在AI领域的实力和进步。NVIDIA凭借其强大的GPU系统取得了领先的地位,而英特尔和Google也在测试中展示了他们的实力。随着AI技术的不断发展,我们有理由相信未来会有更多的突破和创新。uN528资讯网——每日最新资讯28at.com


uN528资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-27-30041-0.htmlNVIDIA在生成式AI训练基准测试中技压群雄

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 苹果Vision Pro在企业市场的应用与优势

下一篇: 欧盟公布“守门人”名单,对大厂进行更严格监管

标签:
  • 热门焦点
  • Rust中的高吞吐量流处理

    作者 | Noz编译 | 王瑞平本篇文章主要介绍了Rust中流处理的概念、方法和优化。作者不仅介绍了流处理的基本概念以及Rust中常用的流处理库,还使用这些库实现了一个流处理程序
  • 2023 年的 Node.js 生态系统

    随着技术的不断演进和创新,Node.js 在 2023 年达到了一个新的高度。Node.js 拥有一个庞大的生态系统,可以帮助开发人员更快地实现复杂的应用。本文就来看看 Node.js 最新的生
  • CSS单标签实现转转logo

    转转品牌升级后更新了全新的Logo,今天我们用纯CSS来实现转转的新Logo,为了有一定的挑战性,这里我们只使用一个标签实现,将最大化的使用CSS能力完成Logo的绘制与动画效果。新logo
  • 把LangChain跑起来的三个方法

    使用LangChain开发LLM应用时,需要机器进行GLM部署,好多同学第一步就被劝退了,那么如何绕过这个步骤先学习LLM模型的应用,对Langchain进行快速上手?本片讲解3个把LangChain跑起来
  • 分布式系统中的CAP理论,面试必问,你理解了嘛?

    对于刚刚接触分布式系统的小伙伴们来说,一提起分布式系统,就感觉高大上,深不可测。而且看了很多书和视频还是一脸懵逼。这篇文章主要使用大白话的方式,带你理解一下分布式系统
  • 三星电子Q2营收60万亿韩元 存储业务营收同比仍下滑超过50%

    7月27日消息,据外媒报道,从三星电子所发布的财报来看,他们主要利润来源的存储芯片业务在今年二季度仍不乐观,营收同比仍在大幅下滑,所在的设备解决方案
  • 三星Galaxy Z Fold5官方渲染图曝光:13.4mm折叠厚度依旧感人

    据官方此前宣布,三星将于7月26日在韩国首尔举办Unpacked活动,届时将带来带来包括Galaxy Buds 3、Galaxy Watch 6、Galaxy Tab S9、Galaxy Z Flip 5、
  • 英特尔Xe-HP项目终止,将专注Xe-HPC/HPG系列显卡

    据10 月 31 日消息报道,英特尔高级副总裁兼加速计算系统和图形事业部总经理 表示,Xe-HP“ Arctic Sound” 系列服务器 GPU 已经应用于 oneAPI devcloud 云服
  • 苹果140W USB-C充电器:采用氮化镓技术

    据10 月 30 日 9to5 Mac 消息报道,当苹果推出新的 MacBook Pro 2021 时,该公司还推出了新的 140W USB-C 充电器,附赠在 MacBook Pro 16 英寸机型的盒子里,也支
Top