搞定1730亿参数大语言模型!NVIDIA下代巨型GPU露出獠牙

文章来源:快科技 发布日期:2023-11-14 分类:快科技 阅读(0)

快科技11月14日消息,NVIDIA第一次披露了下一代AI/HPC加速器的情况,架构代号Blackwell,核心编号GB200,加速器型号B100。

NVIDIA第一次公开确认,B100将在2024年发布,但未出更具体的时间表。

此前曝料称,B100原计划2024年第四季度推出,但因为AI需求太火爆,已经提前到第二季度,现已进入供应链认证阶段。

搞定1730亿参数大语言模型!NVIDIA下代巨型GPU露出獠牙

NVIDIA表示,B100加速器可以轻松搞定1730亿参数的大语言模型,是现在H200的两倍甚至更多。

虽然这不代表原始计算性能,但也足以令人望而生畏。

搞定1730亿参数大语言模型!NVIDIA下代巨型GPU露出獠牙

同时,B100还将带来更高级的HBM高带宽内存规格。

回顾历史,Pascal P100、Ampere A100、Hopper H100、H200分别首发应用HBM2、HBM2e、HBM3、HBM3e。

接下来的B100肯定赶不上HBM4(规范还没定呢),但必然会在堆叠容量、带宽上继续突破,大大超越现在的4.8TB/s。

搞定1730亿参数大语言模型!NVIDIA下代巨型GPU露出獠牙

Blackwell架构同时也会用于图形工作站和桌面游戏,传闻有GB202、GB203、GB205、GB206、GB207等不同核心,但是对于RTX 50系列,NVIDIA始终三缄其口,几乎肯定到2025年才会发布。

2024年就将是RTX 40 SUPER系列的天下了,明年初的CES 2025首发三款型号RTX 4080 SUPER、RTX 4070 Ti SUPER、RTX 4070 SUPER。

搞定1730亿参数大语言模型!NVIDIA下代巨型GPU露出獠牙

【本文结束】如需转载请务必注明出处:快科技

责任编辑:上方文Q

最新文章:

二维码