Cloudera, la única compañía que lleva la inteligencia artificial a los datos en cualquier lugar, anuncia una alianza estratégica con VAST Data, empresa especializada en sistemas operativos de IA, con el objetivo de proporcionar una plataforma unificada y escalable para la gestión y gobernanza de los datos en cualquier entorno.

Esta plataforma está basada en el diseño de NVIDIA AI Data Platform e integra los servicios de datos de Cloudera con el sistema operativo de IA de VAST para soportar cargas de trabajo a gran escala. Además, se encuentra disponible en nubes públicas e instalaciones on-premise, permitiendo a las organizaciones desplegar sus modelos de inteligencia artificial en el lugar más adecuado, donde se asegure el rendimiento, se garantice el cumplimiento normativo y se controlen los costes.

Optimizando el potencial de las GPU

A medida que las empresas aceleran el despliegue de soluciones de IA generativa y agéntica, muchas descubren que sus arquitecturas no fueron diseñadas para soportar el entrenamiento de los datos, la inferencia y la analítica que requiere la IA. Una situación de la que se deriva la infrautilización de las GPU, que provoca que los clústeres permanezcan ociosos a la espera de los datos.

Para hacer frente a este reto, la plataforma de Cloudera y VAST garantiza que los datos circulen de forma ágil a lo largo del ciclo de vida de la IA y que las GPU reciban información de forma continua y con baja latencia. Algo que mejora notablemente la eficiencia de la computación, al mantener a las GPU trabajando de forma constante.

“Las empresas están realizando grandes inversiones en GPU, pero muchas no consiguen aprovecharlas al máximo debido a cuellos de botella en los datos. La alianza de Cloudera y VAST permite que los datos fluyan sin restricciones desde la ingesta hasta el análisis, evitando la infrautilización de las GPU”, afirma Abhas Ricky, Chief Business Officer & GM, Applied AI en Cloudera.

Por un lado, la arquitectura lakehouse de Cloudera proporciona un conjunto de servicios de datos flexibles que funcionan de forma consistente en entornos híbridos y multicloud: desde ingeniería de datos, gobernanza y análisis en tiempo real hasta el aprendizaje automático.

Por otro lado, la arquitectura Disaggregated Shared Everything de VAST, que es la base su sistema operativo de IA, aporta la capacidad de gestionar grandes volúmenes de información, servicios de bases de datos vectoriales integrados con NVIDIA cuVS y un almacenamiento de alto rendimiento.

Como consecuencia, ambas compañías proporcionan una arquitectura de IA unificada, desde la ingesta del dato hasta el despliegue del modelo, y una operativa consistente en cualquier entorno: centros de datos, nube privada y nube pública.

Un impulso para la inteligencia artificial privada

Esta alianza, que aglutina 60 exabytes de datos gestionados por ambas compañías, también refuerza las soluciones de IA privadas. Combina la infraestructura de IA de NVIDIA, el software NVIDIA AI Enterprise, el AI OS de VAST como plataforma de datos base y los servicios de datos e IA de Cloudera. Todo ello en una propuesta optimizada para desplegar inteligencia artificial privada, bajo control de la propia organización.

Una de estas soluciones es Cloudera AI Inference Service, acelerada por los microservicios NVIDIA NIM, que permite a las empresas llevar la IA hasta sus datos y desplegar cualquier modelo a la escala que necesiten.

Para las grandes empresas, y especialmente para las que operan en sectores regulados, esto supone una solución completa que cubre todo el recorrido: desde la infraestructura física hasta la aplicación final. Y permite construir sistemas de IA listos para producción en cualquier entorno.

“La mayoría de las empresas ya tienen los datos que necesitan para impulsar la IA y ahora el reto es extraer su valor. Juntos, Cloudera y VAST, estamos ayudando a nuestros clientes a construir soluciones de IA en entornos híbridos que conectan datos, inteligencia e infraestructura en una única plataforma operativa”, concluye Jeff Denworth, cofundador de VAST Data.