Поскольку во все более цифровой глобальной экономике организации стремятся получить конкурентные преимущества, искусственный интеллект (ИИ) привлекает значительное внимание. Неудивительно, что инициативы в области ИИ появляются в самых различных областях бизнеса, таких как производство, поддержка клиентов, маркетинг и продажи. Аналитики Gartner прогнозируют, что глобальный объем бизнеса на основе технологий ИИ достигнет к 2022 году 3,9 трлн долл.[i] Однако, когда компании пытаются выяснить, как же воплотить обещанные возможности ИИ в реальность, они сталкиваются со множеством сложных решений – со всевозможными стеками программного обеспечения, нейронными сетями и компонентами инфраструктуры, что самым серьезным образом отражается на времени реализации подобных инициатив и получения значимых результатов.
В такой сложной среде крайне важно, чтобы организации могли полагаться на поставщиков, которым они доверяют. За последние несколько лет Dell EMC и NVIDIA тесно сотрудничают, чтобы помочь организациям ускорить свои инициативы в области ИИ. Для организаций, которые предпочитают создавать собственные решения, мы предлагаем ультраплотные серверы Dell EMC PowerEdge C-series с графическими процессорами NVIDIA TESLA V100 Tensor Core, которые позволяют масштабировать ИИ-решения, поддерживая от четырех до сотен графических ускорителей (GPU) на кластер. Клиентам, которые хотят использовать для реализации своих инициатив в области глубокого обучения (Deep Learning) предварительно проверенный, валидированный стек оборудования и программного обеспечения, мы предлагаем решения Dell EMC Ready Solutions for AI: Deep Learning with NVIDIA, в которых также применяется хранилище Dell EMC Isilon All-Flash. В основе нашего партнерства — философия гибкости и предоставления возможности информированного выбора из широкого портфеля решений.
«Сейчас мы входим в эпоху ИИ, когда каждая отрасль будет задействовать и использовать искусственный интеллект, — отметил Ян Бак (Ian Buck), вице-президент и директор по ускоренным вычислениям в компании NVIDIA. — Работая вместе, NVIDIA и Dell EMC предоставляют предприятиям одни из самых мощных решений с графическими ускорителями, чтобы они могли быстро интегрировать технологии ИИ в свой бизнес».
Dell EMC и NVIDIA расширяют свое сотрудничество и анонсируют новую эталонную архитектуру для задач ИИ. Она включает в себя серверы NVIDIA DGX-1, дополненные высокопроизводительным сетевым хранилищем Dell EMC Isilon All-Flash (NAS), целиком построенным на флэш-памяти. Это предложение сочетает в себе решение NVIDIA DGX-1, специально разработанное для уникальных требований ИИ и глубокого обучения, оснащенное восемью передовыми ускорителями для центров обработки данных — NVIDIA Tesla V100 Tensor Core GPU, и горизонтально масштабируемую систему хранения на флэш-памяти Dell EMC Isilon. Данная комбинация нацелена на предоставление клиентам более гибких возможностей развертывания систем при решении задач ИИ и обеспечивает прорывную производительность для крупномасштабного глубокого обучения. Поскольку Dell EMC часто выступает в роли доверенного ИТ-консультанта с широким портфелем решений, это позволяет поддерживать клиентов, планирующих развертывание NVIDIA DGX-1 с масштабируемым хранилищем Dell EMC. Можно делать это проще и с меньшим риском.
Ключевые компоненты данного предложения:
- Серверы NVIDIA DGX-1, которые содержат до 8 NVIDIA Tesla V100 Tensor Core GPU с полным интерконнектом с гибридной ячеистой топологией куба. Каждый сервер DGX-1 может обеспечить в задачах ИИ производительность 1 Петафлопс и работает с программным стеком DGX, который включает в себя оптимизированные для платформы NVIDIA версии самых популярных систем глубокого обучения. Это позволяет достигать максимальную производительность в задачах обучения.
- Система хранения Dell EMC Isilon All-Flash Scale-Out NAS обладает высокой масштабируемостью (до 33 Пбайт емкости), производительностью (до 540 Гбайт/с) и поддерживает высокий уровень параллелизма (до миллионов подключений) для устранения узких мест в подсистеме ввода-вывода хранилища и ускорения рабочих нагрузок ИИ большого масштаба.
Для валидации новой референсной архитектуры мы использовали несколько стандартных эталонных тестов классификации изображений с наборами данных 22 ТБ для имитации реальных задач обучения и формирования выводов (см. подробности в совместном техническом документе). Это тестирование проводилось на системах, содержащих от одного DGX-1 вплоть до восьми серверов DGX-1, подключенных к восьми узлам Isilon F800. Результаты двух ключевых тестов показаны ниже на рисунках 1 и 2. Как мы доказали с помощью тестов решения Ready Solution for Deep Learning с серверами C4140, система Isilon может адекватно отвечать росту нагрузки и линейно масштабироваться для достижения максимальной производительности на уровне вычислений.
Вот некоторые из основных результатов нашего тестирования референсной архитектуры Isilon и NVIDIA DGX-1:
- Достигнуты убедительные результаты по производительности при выполнении отраслевых стандартных тестов для задач ИИ в конфигурации от восьми до 72 графических процессоров без снижения производительности или пропускной способности.
- Обеспечивается линейная масштабируемость от 8-72 графических процессоров до 19,9 ГБ/с при сохранении коэффициента использования GPU на уровне >97%.
- Система Isilon F800 может обеспечить до 96% пропускной способности локальной памяти, максимально приближая ее к теоретическому пределу производительности, который может достичь NVIDIA DGX-1.
Обладая превосходными возможностями для массивно-параллельного ввода-вывода, достижения низкой латентности, высокой пропускной способности, система Dell EMC Isilon и серверы NVIDIA DGX-1 прекрасно дополняют друг друга. Они позволяют справиться с задачами интенсивного обучения, эффективно сокращая время, необходимое для обучения и тестирования аналитических моделей на платформах ИИ с многопетабайтными наборами данных.
Эта новая референсная архитектура подкрепляет стремление Dell EMC и NVIDIA сделать технологию ИИ простой и доступной для организаций, желающих применять методы ИИ и глубокого обучения для разработки новых приложений или решения сложных задач обработки данных. Эта валидированнная референсная архитектура дополняет наш набор совместных предложений, охватывающих рабочие станции Dell Precision, серверы Dell EMC PowerEdge, решения Dell EMC Ready Solutions и Dell EMC Networking.
Оставайтесь с нами для получения более подробной информации о показателях производительности этой референсной архитектуры и о предстоящих анонсах, поскольку наши инновации в области серверов, систем хранения данных программного обеспечения для задач ИИ и глубокого обучения продолжают развиваться.
[1] Пресс-релиз Gartner: апрель 2018 г. https://www.gartner.com/newsroom/id/3872933
