当前位置: 首页 > 时讯

188GB显存 800W功耗!NVIDIA发布H100 NVL加速卡:ChatGPT提速2倍|世界速看料

发布时间:2023-03-22 16:54:56 来源:快科技


【资料图】

ChatGPT作为当下最火爆的AI应用,之所以能达到如此“聪明”的程度,背后离不开海量的训练,离不开强大的算力,使用的是NVIDIA A100加速计算卡。

GTC 2023春季技术大会上,NVIDIA又发布了顶级的H100 NVL,它是已有H100系列的特殊加强版,专为大型语言模型(LLM)进行优化,是部署ChatGPT等应用的理想平台。

H100 NVL单卡具备多达94GB HBM3高带宽显存(内存),照此容量看显然是开启了完整的6144-bit位宽,并启用了全部六颗,等效频率按照5.1GHz计算的话,带宽就是恐怖的3.9GB/s。

但也有个问题,六颗HBM3显存总容量应该是96GB,但是这里少了2GB,官方没有解释,猜测还是出于良品率考虑,屏蔽了少数存储单元。

标签:

Copyright   2015-2022 世界质量网 版权所有  备案号:琼ICP备2022009675号-1   联系邮箱:435 227 67@qq.com