Pure Storage ha presentado FlashBlade//EXA™, su nueva plataforma de almacenamiento de datos diseñada para cargas de trabajo de inteligencia artificial (IA) y computación de alto rendimiento (HPC). La compañía asegura que esta solución ofrece el mayor rendimiento del sector, con una capacidad de lectura superior a 10 terabytes por segundo en un único namespace. Su arquitectura está optimizada para gestionar grandes volúmenes de operaciones de metadatos y mejorar la eficiencia en el entrenamiento de modelos de IA y en la ejecución de tareas de HPC.
La solución responde a una de las principales limitaciones de los sistemas de almacenamiento tradicionales, que no fueron diseñados para la escalabilidad y concurrencia requeridas por las cargas de trabajo actuales. FlashBlade//EXA se basa en una arquitectura paralela y desagregada que optimiza el rendimiento de los metadatos y permite una integración flexible con infraestructuras existentes.
Un cambio en el paradigma del almacenamiento para IA y HPC
El crecimiento en la capacidad de procesamiento de las unidades de procesamiento gráfico (GPU) ha impulsado el desarrollo de modelos de IA más complejos y con mayor demanda de datos. Sin embargo, los sistemas de almacenamiento convencionales presentan cuellos de botella en el rendimiento de metadatos, la latencia y la velocidad de transferencia, lo que limita la escalabilidad de estos modelos.
Pure Storage plantea que FlashBlade//EXA supera estos desafíos con una arquitectura diseñada para manejar cargas de trabajo multimodales (texto, imágenes, vídeos) y optimizar el acceso a grandes volúmenes de datos con una alta simultaneidad. La solución incorpora un sistema de almacenamiento basado en nodos de datos off-the-shelf (OTS) que permiten una escalabilidad flexible y una gestión eficiente de costos.
Principales características de FlashBlade//EXA
-
Escalabilidad de datos y metadatos de forma independiente:
- Capacidad de crecimiento casi ilimitada con nodos de datos estándar.
- Eliminación de cuellos de botella mediante una arquitectura desagregada.
-
Alto rendimiento y baja latencia:
- Más de 10 terabytes por segundo de velocidad de lectura en un único namespace.
- Procesamiento paralelo masivo y escalabilidad de IOPS de metadatos.
-
Reducción de la complejidad de gestión:
- Configuración simplificada sin necesidad de ajustes manuales.
- Disponibilidad y resiliencia mejoradas para la gestión de conjuntos de datos masivos.
-
Compatibilidad con infraestructuras estándar de la industria:
- Uso de protocolos de red estándar y conectividad con NIC NVIDIA ConnectX, conmutadores Spectrum y cables LinkX.
- Integración con librerías de comunicaciones aceleradas.
Impacto en la infraestructura de IA y computación avanzada
La demanda de almacenamiento de alto rendimiento ha aumentado con el desarrollo de modelos de IA de gran escala, que requieren acceso simultáneo a enormes volúmenes de datos. FlashBlade//EXA busca optimizar estos procesos al mejorar la eficiencia en la transferencia de información y reducir los tiempos de inactividad en el entrenamiento de modelos.
Además, su arquitectura paralela y desagregada permite a las empresas adaptarse a la evolución de los modelos de IA sin comprometer la eficiencia en costos ni la escalabilidad. Según la compañía, la combinación del motor de metadatos de Pure Storage y el sistema operativo Purity contribuirá a mejorar la utilización de GPU y reducir los tiempos de inferencia.
La nueva plataforma estará disponible a partir del verano de 2025, según ha anunciado Pure Storage.
