英伟达H100霸榜权威AI性能测试 11分钟搞定基于GPT-3的大模型训练
金钱策略师
2024-05-24 22:53:55
0

K图 NVDA_0

  当地时间周二,机器学习及人工智能领域开放产业联盟MLCommons披露两项MLPerf基准评测的最新数据,其中英伟达H100芯片组在人工智能算力表现的测试中,刷新了所有组别的纪录,也是唯一一个能够跑完所有测试的硬件平台。

image

(来源:英伟达、MLCommons)

  MLPerf是由学术界、实验室和产业组成的人工智能领袖联盟,是目前国际公认的权威AI性能评测基准。Training v3.0包含8种不同的负载,包括视觉(影像分类、生物医学影像分割、两种负载的物体侦测)、语言(语音识别、大语言模型、自然语言处理)和推荐系统。简单来说,就是由不同的设备供应商提交完成基准任务所需要的时间。

image

(Training v3.0训练基准,来源:MLCommons)

  在投资者比较关注的“大语言模型”训练测试中,英伟达和GPU云算力平台CoreWeave提交的数据为这项测试设定了残酷的业界标准。在896个英特尔至强8462Y+处理器和3584个英伟达H100芯片的齐心协力下,仅仅花了10.94分钟就完成了基于GPT-3的大语言模型训练任务。

  除了英伟达外,只有英特尔的产品组合在这个项目上获得评测数据。由96个至强8380处理器和96个Habana Gaudi2 AI芯片构建的系统中,完成同样测试的时间为311.94分钟。横向对比,使用768个H100芯片的平台跑完这个测试也只需要45.6分钟。

image

(芯片越多数据越好看,来源:英伟达)

  对于这个结果,英特尔也表示仍有上升空间。理论上只要堆更多的芯片,运算的结果自然会更快。英特尔AI产品高级主管Jordan Plawner对媒体表示,接下来Habana的运算结果将会呈现1.5倍-2倍的提升。Plawner拒绝透露Habana Gaudi2的具体售价,仅表示业界需要第二家厂商提供AI训练芯片,而MLPerf的数据显示英特尔有能力填补这个需求。

  而在中国投资者更熟悉的BERT-Large模型训练中,英伟达和CoreWeave将数据刷到了极端的0.13分钟,在64卡的情况下,测试数据也达到了0.89分钟。BERT模型中的Transformer结构正是目前主流大模型的基础架构。

  相关报道

  国家信息中心单志广:算力指数每提高1点 对GDP有1.8‰的推动

  算力能耗均优于GPU!韩国政企联合斥资研发NPU芯片 替代竞争或将开启

相关内容

2900点得而复失!连续重...
  今日早盘,A股冲高回落,上证指数2900点得而复失,沪深300...
2024-05-26 22:29:30
英伟达H100霸榜权威AI...
  当地时间周二,机器学习及人工智能领域开放产业联盟MLCommo...
2024-05-24 22:53:55

热门资讯

带动超3亿人就业的“半壁江山”... 新中国成立70年来,我国服务业规模日益壮大,综合实力不断增强,质量效益大幅提升,新产业新业态层出不穷...
芭田股份(002170)5月2... 证券之星消息,截至2024年5月20日收盘,芭田股份(002170)报收于6.49元,上涨3.67%...
2024年2月12日全国主要批... (原标题:2024年2月12日全国主要批发市场花生油价格行情) ...
大型纪录片《瓣瓣同心——京津冀...   由中央广播电视总台财经节目中心制作的三集大型纪录片《瓣瓣同心——京津冀协同发展十年》2月26日开...
港元两周及以下拆息全线回升 隔... 1月3日,港元拆息继昨日全线下跌后,今日两周及以下拆息全线回升,其中,隔夜息反弹26基点至4.666...
时隔20年,宝格丽酒店重回意大... 2023年6月,全球第九家宝格丽酒店罗马宝格丽酒店落户罗马奥古斯都广场,这也是全球最新宝格丽酒店。2...
吃不腻的家常菜,简单易做,好上... 胃和心,总要有一个是满的。所以,全世界的迷茫和忧伤都可以用美食去抵挡!更多家常美食做法,请关注典典小...
公司日报A股反攻,中证1000... 截至2024年2月6日,上证指数收涨3.23%,报2789.49点;深证成指收涨6.22%,报846...
“一正五副”架构初定,华夏银行... (原标题:“一正五副”架构初定,华夏银行或迎来最年轻股份行行长)在行长职位空缺两月有余后,华夏银行(...