ИИ-СХД Huawei OceanStor A310

Единая система хранения данных, основанная на искусственном интеллекте, охватывает весь процесс искусственного интеллекта. Модель продукта All-Flash вмещает до 8 узлов и 96 дисковых слотов в корпусе высотой 5 U и использует общесистемный интерфейс PCIe 5.0 для обеспечения лучшей в отрасли гибридной производительности с пропускной способностью 400 ГБ/с и 12 миллионов операций ввода-вывода в секунду, помогая вам легко устранить узкие места в процессе ИИ.

До 4096 A310 могут быть объединены в кластер, а производительность линейно масштабируется. Кластеризованный набор узлов использует общую файловую систему. Глобальная файловая система компании (GFS) поддерживает стандартные протоколы (NFS/SMB/HDFS/S3/POSIX/MP-IO) для приложений. Программное обеспечение Node может обеспечивать предварительную обработку данных, такую ??как фильтрация, транскодирование и улучшение видео и изображений. Эти так называемые вычисления в памяти могут уменьшить объем данных, отправляемых в хост-систему обработки ИИ.

Особенности

Многопротокольное взаимодействие

Он обеспечивает унифицированную основу, которая обеспечивает доступ к данным по нескольким протоколам, таким как NFS, CIFS, S3, HDFS и POSIX, а также позволяет вызывать одну копию данных на нескольких этапах, исключая копирование и преобразование данных на протяжении всего процесса искусственного интеллекта.

Структура данных

Основанный на глобальной файловой системе (GFS), он обеспечивает глобальное унифицированное представление данных и планирование для всех систем, регионов и облаков, чтобы помочь пользователям получить доступ к необработанным данным ИИ, разбросанным в разных регионах, и упростить процесс агрегирования огромных объемов данных ИИ.

Вычисления в оперативной памяти

Благодаря встроенной мощной вычислительной мощности он обеспечивает возможности точной обработки, близкие к данным, которые позволяют фильтровать, комбинировать и обрабатывать данные обучения ИИ в хранилище и избегать ненужной передачи данных между хранилищем и вычислениями, повышая эффективность обучения на 30%.

Отличная масштабируемость

Полностью симметричную горизонтально масштабируемую архитектуру можно плавно расширить до 4096 узлов в любое время и в любом месте, что поможет вам легко справляться с постоянно растущим объемом данных, генерируемых в ходе всего процесса искусственного интеллекта.

Высокий порог для реализации больших моделей, построения сложных систем, сложного планирования ресурсов и использования ресурсов графического процессора обычно ниже 40%. Озерное хранилище данных глубокого обучения Huawei OceanStor A310 подходит для различных отраслей и сценариев в приложениях для крупных моделей. В контексте сценариев базовых и крупных отраслевых моделей OceanStor A310 представляет собой решение для хранения данных глубокого обучения, которое предлагает неограниченную горизонтальную масштабируемость и высокую производительность для смешанных рабочих нагрузок. Он обеспечивает комплексное управление массивными хранилищами данных для процессов ИИ, включая сбор данных, предварительную обработку, обучение и логические выводы. Он обладает возможностями анализа данных, совместимыми с HPC и большими данными, что позволяет обрабатывать данные из аналогичных источников.