Top.Mail.Ru
Релиз Ryzen AI. Процессоры с NPU XDNA 2 для задач ИИ | Блог Serverflow Скачать
прайс-лист
Бесплатная
доставка по РФ
Бонус за
обратную связь
Интернет-магазин
Серверного оборудования
8 (800) 222-70-01 Консультация IT-специалиста Сравнение

Релиз Ryzen AI. Процессоры с NPU XDNA 2 для задач ИИ

~ 15 мин
7109
Простой
Статьи
Релиз Ryzen AI. Процессоры с NPU XDNA 2 для задач ИИ

Введение

На выставке Computex 2024 AMD представила новые мобильные процессоры Ryzen AI 300 Strix Point. Архитектура новых процессоров разительно отличается от того, что мы видели ранее. Теперь на подложке у нас единый монокристалл, со множеством различных блоков внутри. Компания сделала акцент исключительно на производительности в задачах ИИ. 

struktura-ryzen-ai-npu-blok-blok-yader-gpu-blok.jpg
Внутреннее устройство процессора Ryzen AI: NPU, блок ядер, GPU. Источник - презентация AMD Computex 2024

Ryzen AI 9 HX 370

Разберём на примере Ryzen AI 9 HX 370. В монокристалле мы имеем единый блок ядер ZEN5 и ZEN5C ядер с L3 Cache. Примечательно, что ядра 2 блока Zen5c имеют общие 8MB L3 Cache, в то время как у Zen5 ядер кэш 16MB. Если говорить простым языком, то это похоже на решения Intel с маленькими и большими ядрами. В процессоре теперь присутствует NPU блок на архитектуре XDNA 2 для ускорения работы ИИ с производительностью в 50 TOPS. Обновления коснулась и графики. Ryzen AI 9 HX 370 имеет 8CU RDNA 3.5, аналогов на рынке в данный момент пока не существует, по слайду AMD видно, что будут решения и на 16CU.

vpechatlyayushhij-ryzen-ai-9-hx-370.jpg
Крайне интересный процессор Ryzen AI 9 HX 370. Источник - презентация AMD Computex 2024

Процессоры за счёт нового блока NPU увеличили производительность вычислений FP16 путём добавления отдельного блока для вычислений FP16. Ранее для работы с нейросетями активно применялся режим INT8 для ускоренной работы, однако результат такого обучения был не всегда удовлетворительным. Для улучшения результатов использовался FP16, который делал это дольше, но качественнее. AMD заверяет, что на новых процессорах можно получить сопоставимые скорости при 8-bit (INT8) и результат как при 16-bit (FP16). Сегодня большинство приложений работают на FP16 системе.

amd-xdna-2---samyj-moshhnyj-npu-dlya-copilot-pcs.jpg
NPU на базе XDNA 2 - самое производительное решение для Copilot+ PCs. Источник - презентация AMD Computex 2024

rabota-int8-block-fp16-fp16-v-xdna-2-u-novykh-proczessorov-ryzen-ai.jpg
Наглядная таблица производительности и точности режимов вычислений INT8, Block FP16 и FP16 в новых NPU XDNA 2. Источник - презентация AMD Computex 2024

AMD выпустила продукт новой эры для «AI PC». Новая версия OS Windows будет тесно интегрирована с нейросетью Microsoft Copilot. Для быстрой работы нейросети задействуются мощности новых процессоров, предполагается, что эти процессоры будут справляться с задачами AI в десятки раз быстрее обычных процессоров без NPU блока. К сожалению, нам не показали никаких тестов чистой производительности процессоров хотя бы в бенчмарках, ввиду этого факта мы не можем сделать выводов, о процентном приросте производительности за поколение в классических задачах или, например, играх.

Весь упор презентации был акцентирован именно на работу с ИИ, а именно Copilot+ PCs. Интересно увидеть реальные тесты производительности и как именно AI PC изменят наш опыт использования компьютеров.

raznicza-vizualizaczij-izobrazhenij-na-baze-int8-block-fp16-fp16.jpg
Разница результатов визуализации изображений на базе INT8, Block FP16, FP16. Источник - презентация AMD Computex 2024

Если говорить о конкуренции с Intel, то их процессоры Lunar Lake устарели, не успев выйти в свет в задачах ИИ. Осталось сравнить производительность этих решений между собой, чтобы увидеть полную картину соперничества двух компаний.

Автор: Serverflow Serverflow
Поделиться

Комментарии 4

Написать комментарий
Леонид
Ядра Zen5c делят 8 МБ L3 на два блока, а у Zen5 16 МБ. В сценариях с активным NPU и GPU общая шина данных может стать узким местом, если кэш мелких ядер переполняется.
Serverflow
Вы правы, распределение кэша между кластерами влияет на пропускную способность в многопоточных нагрузках, особенно при одновременной работе ИИ и графики.
Вячеслав
Block FP16 при той же скорости, что INT8. Значит, в приложениях, где раньше резали разрядность ради времени, теперь можно не выбирать. Это снимает компромисс между скоростью и качеством.
Serverflow
Именно так: технология Block FP16 обещает сохранить точность FP16 на скорости INT8, что даёт больше гибкости при развёртывании моделей.
Александр
16 CU в RDNA 3.5 обещают, а аналогов нет. Это будет отдельный кристалл или часть того же монолита? И как повлияет на теплопакет верхней модели?
Serverflow
На презентации AMD не уточнила компоновку 16-ядерного варианта, но судя по монолитной структуре, вероятно, это та же подложка с увеличенным GPU-блоком.
Светлана
50 TOPS у NPU XDNA 2. Если это не синтетический пик, а устойчивая производительность, то локальный запуск моделей в 7B параметров перестаёт быть узким местом на ноутбуке.
Serverflow
Да, AMD заявляет 50 TOPS именно для блока NPU, и это сопоставимо с пиком некоторых дискретных ускорителей прошлого поколения.
Написать отзыв
До 6 фото, размером до 12Мб каждое
Мы получили ваш отзыв!

Он появится на сайте после модерации.

Написать комментарий

Комментарий появится на сайте после предварительной модерации

До 6 фото, размером до 12Мб каждое
Мы получили ваш отзыв!

Он появится на сайте после модерации.

Мы свяжемся с вами утром

График работы: Пн-Пт 10:00-18:30 (по МСК)

Обработаем вашу заявку
в ближайший рабочий день

График работы: Пн-Пт 10:00-18:30 (по МСК)