Nvidia GH100 площадью 1000мм² — самый большой в мире GPU
Nvidia продолжает разработку своего флагманского графического ускорителя GH100 для дата-центров (Hopper GPU). Уже появилась информация, что это будет не только самый мощный, но и самый большой GPU по размеру с площадью кристалла около 1000 мм².
TDP видеокарты ожидается в районе 1000 Вт или чуть больше.
На сегодняшний день самым большим по размеру GPU у компании является Ampere GA100 площадью 826 мм², представленный 14 мая 2020 года. Этот монстр с 54 млрд транзисторов содержит 8192 ядра CUDA и 512 тензорных ядер третьего поколения и шесть модулей памяти HBM2 с шиной памяти разрядностью в 6144 бита. Ничего подобного по мощности на рынке просто не существовало на момент появления этого чипа.
Ampere GA100 изготавливается на мощностях TSMC по техпроцессу 7 нм. На его базе собирается графический ускоритель Nvidia A100, известный также под названием Tesla A100.
Nvidia A100
Производительность ускорителя A100 составляет 19,5 TFLOPS (FP32) либо 9,7 TFLOPS (FP64). На этом железе собираются различные вычислительные установки. Например, станция Nvidia DGX A100 стоимостью $200 000, которая включает восемь ускорителей A100.
Станция DGX A100 для инфраструктуры ИИ
На этой же платформе собирают и суперкомпьютеры Nvidia DGX с ускорителями A100. Что интересно, эти машины Nvidia в последнее время собирает на базе процессоров AMD, а не Intel. В частности, DGX A100 содержит два 64-ядерных CPU Epyc 7742, а также 1 ТБ RAM.
Стойка с пятью суперкомпьютерами DGX-1, источник
Так вот, сейчас к производству готовят новую микросхему GH100, которая явно превзойдёт своего предшественника по всем характеристикам.
Возможно, GH100 (Hopper) станет последним графическим ускорителем в этой линейке с «монолитным» дизайном, до перехода на модули MCM (multi-chip module). В то же время есть информация, что одна из модификаций Hopper тоже будет в варианте MCM, то есть характеристики каждого чипа можно удваивать для двойного модуля. Возможно, эта модификация получит название GH102.
Ранее уже сообщалось, что ускоритель GH100 будет производить компания TSMC по техпроцессу 5 нм. Официально технические характеристики пока не объявлены, но можно предположить 18 432 ядра CUDA, то есть в 2,25 раза больше, чем у GA100. Также следует ожидать увеличения количества тензорных ядер, FP64 и FP16.
Конкуренцию этому GPU на рынке высокопроизводительных вычислений ИИ составляют ускорители AMD Instinct MI200 и будущий Intel Ponte Vecchio.
Ускоритель Intel Ponte Vecchio, источник
Nvidia может опубликовать дополнительную информацию об Ampere GH100 на конференции 22 марта 2022 года.
