Следите за новостями по этой теме!
Подписаться на «Рифы и пачки / Твоя культура»
На саммите Open Compute Project Global Summit Intel представила графический ускоритель D-series с объёмом памяти до 480 ГБ. Он рассчитан на ИИ-инференс — выполнение запросов уже обученной моделью, — а не на игры. Устройство ранее было известно под кодовым названием Crescent Island и оснащено специализированными вычислительными блоками.
По объёму памяти новинка опередила ускоритель Nvidia Blackwell Ultra B300, у которого 288 ГБ памяти HBM3e. При этом Intel выбрала не GDDR7, применяемую в современных видеокартах, а LPDDR5X — тип памяти, широко используемый в ноутбуках и других устройствах, где важна экономия энергии. Такая конфигурация показывает, что компания делает ставку на вместимость и энергоэффективность при обработке ИИ-запросов, а не на создание обычной игровой видеокарты.
По заявлению Intel, один ускоритель D-series сможет обслуживать большие языковые модели размером до 300 млрд параметров. Восемь GPU в одной системе, как утверждает компания, позволят работать с моделями, в которых более 1 трлн параметров. Предполагаемые сценарии — обработка длинных запросов, одновременное обслуживание множества обращений, корпоративные ИИ-сервисы и робототехника, где важна быстрая реакция.
Большой объём памяти нужен, чтобы во время инференса держать доступными значительную часть параметров модели и связанные с ними данные. Однако одни лишь 480 ГБ не говорят о том, насколько быстро ускоритель будет отвечать на запросы: важны также пропускная способность памяти, вычислительные ресурсы, программное обеспечение и особенности конкретной задачи.
Intel указывает производительность 1,3 петафлопса в формате FP8. Это числовой формат, который применяют для ускорения ИИ-вычислений и снижения требований к памяти по сравнению с форматами более высокой точности. Пропускная способность памяти составляет 1,5 ТБ/с — этот показатель описывает скорость обмена данными между памятью и процессором. Заявленный лимит энергопотребления — 350 Вт.
Ускоритель выполнен в стандартном формате PCIe, использует воздушное охлаждение и, по данным Intel, совместим с программной экосистемой её GPU. Компания рассчитывает, что это упростит установку в существующих дата-центрах без специального охлаждения и полной перестройки серверных стоек.
Intel также планирует связать D-series с процессорами Xeon. Центральный процессор сможет координировать задачи, управлять передачей данных и выполнять работу, для которой не требуется GPU. Такой подход рассчитан на ИИ-системы, где запрос проходит несколько этапов: поиск информации, рассуждение модели, координацию действий, обращение к внешним инструментам и выполнение задачи.
Вице-президент Intel по продуктам ИИ и коммерческому развитию в подразделении Data Center Group Анил Нандури заявил, что инференс становится ключевой нагрузкой для ИИ, а предприятиям нужна инфраструктура с подходящими производительностью и стоимостью. Он отметил, что D-series призвана сделать инференс с большим объёмом памяти практичным для внедрения и масштабирования.
Вице-президент Intel по системам и решениям для дата-центров Николя Дюбе связал спрос на такую инфраструктуру с ростом числа открытых моделей. По его словам, компаниям нужны вычислительные ресурсы, которые можно подбирать под разные задачи и их экономические требования. Intel формулирует этот принцип как «поместить каждый запрос на своё место».
На момент публикации Intel не объявила ни розничную цену GPU D-series, ни точную дату его массового выхода на рынок.
Intel представила на саммите Open Compute Project Global Summit графический ускоритель D-series с памятью до 480 ГБ, предназначенный для ИИ-инференса — обработки запросов уже обученными моделями. Ранее устройство было известно под кодовым названием Crescent Island. По объёму памяти оно превосходит Nvidia Blackwell Ultra B300 с 288 ГБ HBM3e.
Вместо GDDR7 Intel выбрала LPDDR5X, распространённую в ноутбуках и устройствах с ограничениями по энергопотреблению. Компания ориентируется на высокую вместимость и энергоэффективность для ИИ, а не на игровое применение. По данным Intel, один GPU поддержит модели до 300 млрд параметров, а система из восьми ускорителей — модели свыше 1 трлн параметров. Сценарии включают длинные запросы, одновременную обработку большого числа обращений, корпоративные ИИ-сервисы и робототехнику.
Заявленная производительность составляет 1,3 петафлопса в формате FP8, который помогает ускорять ИИ-вычисления и снижает потребность в памяти по сравнению с форматами высокой точности. Пропускная способность памяти — 1,5 ТБ/с, энергопотребление — 350 Вт. При этом объём памяти сам по себе не определяет быстродействие: также важны пропускная способность, вычислительные ресурсы, программное обеспечение и конкретная нагрузка.
Ускоритель использует стандартный форм-фактор PCIe и воздушное охлаждение. Intel заявляет о совместимости с программной экосистемой своих GPU, рассчитывая упростить установку в действующих дата-центрах без специального охлаждения или полной модернизации стоек. Также компания планирует связать D-series с процессорами Xeon, которые будут координировать задачи, управлять перемещением данных и выполнять операции, не требующие GPU. Это рассчитано на ИИ-процессы с несколькими этапами: поиском информации, рассуждением, координацией, обращением к внешним инструментам и выполнением действий.
В Intel называют инференс ключевой ИИ-нагрузкой и считают, что открытые модели расширяют возможности компаний. По словам представителей компании Анила Нандури и Николя Дюбе, инфраструктуру следует подбирать под задачи и экономику применения. Intel описывает эту идею формулой «каждому запросу своё место». На момент публикации компания не объявила цену и конкретную дату массового выхода GPU D-series.