关闭广告

英伟达H100杀疯了:11分钟训完GPT-3,霸榜8项测试

量子位15805人阅读

明敏 发自 凹非寺
量子位 | 公众号 QbitAI

11分钟内训练一遍GPT-3,8秒训完BERT

这就是英伟达给AI圈的一点“小小震撼”。

在最新MLPerf训练基准测试中,英伟达H100集群,横扫八项测试,全部创下新纪录,并且在大语言模型任务中表现尤为突出!



在大语言模型任务中,H100集群的加速性能逼近线性增长

即随着集群处理器数量增加,加速效果也几乎同比增加。

这意味着在集群内GPU之间的通信效率非常高。

阅读全文
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

消息称一加性能新机搭骁龙 8 系旗舰芯 + 超高刷屏、有很酷的联名

IT之家 浏览 678

时隔47年再次探月,俄罗斯“月球-25”号探测器发射升空

观察者网 浏览 14647

专家:诺贝尔化学奖获奖项目产业化或率先在中国实现

上观新闻 浏览 14292

随着蓉城0-2爆冷,海港0-2完败,亚冠最新积分榜:中超领头羊垫底

侃球熊弟 浏览 901

美国防部将提供“战斧”决定权交给总统

国际在线 浏览 740

宝藏BOSS冯擎峰:是CTO,也是CEO

网易汽车 浏览 774

广汽集团:9月份销量173176辆,同比下降 5.17%!

车秀小咖 浏览 1051

男子花600与上门女保洁发生关系 事后将她赤裸扔楼道

花点时间 浏览 75632

不当“等等党”!一汽丰田明星车型限时直补5999元

麻辣车事 浏览 12693

腾讯首次系统披露研发进展:AI生成50%新增代码,研发自动化水平同比提升67%

华尔街见闻官方 浏览 877

C罗再谈曼联:架构出错阿莫林无法创奇迹,为此难过希望尽快复兴

罗米的曼联博客 浏览 706

欧洲提交修改版和平计划 涵盖乌克兰安全保障方式

上观新闻 浏览 410

15岁女孩被同学父亲强奸后宿舍产子 辍学带娃陷入困境

上游新闻 浏览 89153

媒体:中国的两个邻国政局在同一天发生重大变动

北京日报客户端 浏览 14656

马科斯的表弟涉丑闻辞职后 菲国内再次爆发抗议活动

环球网资讯 浏览 23097

G3热火15分惨败掘金,来看赛后斯波、巴特勒和洛瑞说了什么?

篮球资讯达人 浏览 16874

曝特朗普要攻击拜登,卸任后将首次公开露面并讲话

趣看热点 浏览 220351

突发!邓建华被查

中国基金报 浏览 19363

紧急下令停飞!万亿巨头股价大跌

21世纪经济报道 浏览 13073

"老虎"被捕:通报现罕见表述 其被双开后财政部开会警示

政知新媒体 浏览 87312

雷克萨斯全新轿跑车曝光!V6引擎搭配后驱

网上车市 浏览 12724
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1