当前位置:首页 > 科技  > 芯片

NVIDIA在生成式AI训练基准测试中技压群雄

来源: 责编: 时间:2023-11-19 10:30:56 404观看
导读全球最具公信力的人工智能(AI)基准测试MLPerf已进入生成式AI(Generative AI)时代。NVIDIA凭借其强大的GPU系统在最新的生成式AI训练基准测试中取得了领先的地位,而英特尔(Intel)和Google也在测试中展示了他们的实力。在2023

全球最具公信力的人工智能(AI)基准测试MLPerf已进入生成式AI(Generative AI)时代。NVIDIA凭借其强大的GPU系统在最新的生成式AI训练基准测试中取得了领先的地位,而英特尔(Intel)和Google也在测试中展示了他们的实力。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

在2023年早些时候,MLPerf新增了大型语言模型(LLM)训练基准测试,特别是针对GPT-3。而在11月,MLPerf又新增了文字转影像生成器Stable Diffusion基准测试。这些基准测试都是针对生成式AI的,要求参与者在强大的计算系统上完成训练。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

在这个测试中,NVIDIA凭借其HGX H100系统取得了最佳的成绩。HGX H100系统是一个超级电脑,搭载了1万颗GPU。名为Eos的NVIDIA系统仅用了不到4分钟就完成了所有的GPT-3训练基准测试。微软(Microsoft)Azure用相同大小的系统测试,完成时间也只落后了几秒钟。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

英特尔也参与了这个基准测试,他们使用了搭载Gaudi 2加速芯片的系统以及仅搭载第4代Xeon处理器的系统。英特尔启用了Gaudi 2的8位元浮点(FP8)功能,这在部分GPT-3和其他Transformer神经网络中使用,其低精度不会影响精度。测试结果显示,Gaudi 2系统的单芯片速度略低于NVIDIA系统约三分之一,但它是Google TPUv5e的3倍。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

英特尔Habana Labs营运长Eitan Medina表示,他们预估FP8将带来90%的增益,而实际测试中,384个加速器的丛集将训练时间缩短了103%。他还指出,Gaudi 2的价格明显低于H100,因此在价格和效能的综合指标上具有优势。随着Gaudi 3在2024年的推出,此优势将进一步增强。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

除了这些大公司,也有一些仅搭载CPU的系统参与了基准测试。这些系统在几个基准测试的训练时间介于几分钟到几小时之间。除了MLPerf基准测试外,英特尔还分享了一些数据,显示包含AMX矩阵引擎的4节点Xeon系统能在不到5分钟内微调Stable Diffusion影像生成器。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

据报道,共有19家企业和机构提交了超过200份测试结果,显示了AI训练的快速发展。这些提交结果的平均效能较过去5个月增加了2.8倍,比MLPerf开始测试5年来增加了49倍。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

这个基准测试展示了各大公司在AI领域的实力和进步。NVIDIA凭借其强大的GPU系统取得了领先的地位,而英特尔和Google也在测试中展示了他们的实力。随着AI技术的不断发展,我们有理由相信未来会有更多的突破和创新。64u28资讯网——每日最新资讯28at.com


64u28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-27-30041-0.htmlNVIDIA在生成式AI训练基准测试中技压群雄

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 苹果Vision Pro在企业市场的应用与优势

下一篇: 欧盟公布“守门人”名单,对大厂进行更严格监管

标签:
  • 热门焦点
  • K60至尊版刚预热 一加Ace2 Pro正面硬刚

    Redmi这边刚如火如荼的宣传了K60 Ultra的各种技术和硬件配置,作为竞品的一加也坐不住了。一加中国区总裁李杰发布了两条微博,表示在自家的一加Ace2上早就已经采用了和PixelWo
  • Redmi Pad评测:红米充满野心的一次尝试

    从Note系列到K系列,从蓝牙耳机到笔记本电脑,红米不知不觉之间也已经形成了自己颇有竞争力的产品体系,在中端和次旗舰市场上甚至要比小米新机的表现来得更好,正所谓“大丈夫生居
  • Redmi Buds 4开箱简评:才199还有降噪 可以无脑入

    在上个月举办的Redmi Note11T Pro系列新机发布会上,除了两款手机新品之外,Redmi还带来了两款TWS真无线蓝牙耳机产品,Redmi Buds 4和Redmi Buds 4 Pro,此前我们在Redmi Note11T
  • JavaScript 混淆及反混淆代码工具

    介绍在我们开始学习反混淆之前,我们首先要了解一下代码混淆。如果不了解代码是如何混淆的,我们可能无法成功对代码进行反混淆,尤其是使用自定义混淆器对其进行混淆时。什么是混
  • 一文看懂为苹果Vision Pro开发应用程序

    译者 | 布加迪审校 | 重楼苹果的Vision Pro是一款混合现实(MR)头戴设备。Vision Pro结合了虚拟现实(VR)和增强现实(AR)的沉浸感。其高分辨率显示屏、先进的传感器和强大的处理能力
  • 使用LLM插件从命令行访问Llama 2

    最近的一个大新闻是Meta AI推出了新的开源授权的大型语言模型Llama 2。这是一项非常重要的进展:Llama 2可免费用于研究和商业用途。(几小时前,swyy发现它已从LLaMA 2更名为Lla
  • 从零到英雄:高并发与性能优化的神奇之旅

    作者 | 波哥审校 | 重楼作为公司的架构师或者程序员,你是否曾经为公司的系统在面对高并发和性能瓶颈时感到手足无措或者焦头烂额呢?笔者在出道那会为此是吃尽了苦头的,不过也得
  • WebRTC.Net库开发进阶,教你实现屏幕共享和多路复用!

    WebRTC.Net库:让你的应用更亲民友好,实现视频通话无痛接入! 除了基本用法外,还有一些进阶用法可以更好地利用该库。自定义 STUN/TURN 服务器配置WebRTC.Net 默认使用 Google 的
  • 为什么你不应该使用Div作为可点击元素

    按钮是为任何网络应用程序提供交互性的最常见方式。但我们经常倾向于使用其他HTML元素,如 div span 等作为 clickable 元素。但通过这样做,我们错过了许多内置浏览器的功能。
Top