Новый подход к хранению данных для ИИ: как смесь SSD и HDD снижает стоимость инфраструктуры
Компания DataDirect Networks (DDN) представила то, что она называет «революционной» архитектурой для хранения данных, созданной специально для систем с интенсивными вычислениями в области искусственного интеллекта. Данное решение, по утверждению компании, способно обеспечить высочайшую производительность при значительном сокращении общих расходов по сравнению с другими платформами.
Как поясняет DDN, бурный рост технологий ИИ ведёт к резкому увеличению спроса на твердотельные накопители, что вызывает подъём цен на чипы флеш-памяти NAND и, соответственно, на сами SSD. Согласно прогнозам аналитиков TrendForce, контрактные цены на продукцию NAND могут вырасти на 5–10% уже в четвёртом квартале 2025 года. Колебания стоимости SSD и HDD срывают графики проектов, усложняют бюджетное планирование и ставят под вопрос развёртывание крупных ИИ-платформ. Новая архитектура данных от DDN, как заявляется, призвана устранить эту проблему.
Источник изображения: DDN
Традиционные системы хранения, рассчитанные на сложные ИИ-задачи, как отмечает DDN, обычно полагаются только на дорогие высокопроизводительные NVMe-накопители. Архитектура же DDN основана на комбинации трёх уровней хранения: высококлассных SSD, более доступных SSD и жёстких дисков. Подобный подход уже реализован в платформах DDN EXA и Infinia.
Сообщается, что данная архитектура обеспечивает загрузку GPU-ускорителей на уровне 90–98% при выполнении таких задач, как обучение больших языковых моделей (LLM), логический вывод, анализ больших данных и высокопроизводительные вычисления. При этом потребность в дорогих высокопроизводительных NVMe SSD сокращается на 35–65%, капитальные затраты на организацию системы хранения — на 40–70%, а операционные расходы — на 30–60%.
Архитектура глубоко оптимизирована для работы с NVIDIA DGX, GB200, Spectrum-X, BlueField и NIM. В числе потенциальных областей применения называются финансы, автомобильная промышленность и робототехника, биологические науки, производство, государственный сектор и суверенный искусственный интеллект.
Оригинальный материал предоставлен: