Cloudera en VAST bouwen AI-dataplatform
Cloudera en VAST Data zijn een strategische samenwerking aangegaan voor de ontwikkeling van een AI-dataplatform voor hybride en multicloudomgevingen. Volgens een gezamenlijk persbericht combineert de oplossing de lakehouse-dataservices van Cloudera met het AI Operating System van VAST Data, zodat organisaties AI-workloads efficiënter kunnen uitvoeren en data eenvoudiger beschikbaar kunnen maken voor training en inferentie.
De gezamenlijke oplossing is gebaseerd op het NVIDIA AI Data Platform-referentieontwerp en richt zich op organisaties die AI-toepassingen zowel on-premises als in publieke cloudomgevingen willen inzetten. Volgens beide bedrijven ontstaat daarmee een uniforme AI-omgeving waarin data continu worden verzameld, verrijkt, beheerd en beschikbaar gesteld voor AI-modellen.
AI-dataplatform
Cloudera levert binnen de samenwerking containergebaseerde dataservices voor onder meer data-engineering, streaming, analytics, machine learning en AI. VAST Data voegt daar een AI Operating System aan toe met high-performance opslag, databasefunctionaliteit en een wereldwijde namespace voor grootschalige AI- en analyticsworkloads.
Volgens Cloudera en VAST Data moet deze combinatie organisaties helpen een AI-dataplatform op te bouwen waarin data zonder onderbrekingen door de volledige AI-keten stromen, van data-ingestie en voorbereiding tot modeltraining, inferentie en analytics. De oplossing ondersteunt daarnaast private AI-omgevingen met governance- en compliancefunctionaliteit.
Betere benutting GPU’s
Een belangrijk doel van de samenwerking is het voorkomen van GPU starvation, waarbij kostbare GPU-clusters moeten wachten op data. Volgens de bedrijven zorgen datastromen met hoge bandbreedte en lage latency ervoor dat AI-infrastructuur efficiënter wordt benut en de prestaties van AI-workloads verbeteren. Daarnaast wordt ondersteuning toegevoegd voor GPU-versnelde Apache Spark-workloads via NVIDIA cuDF.
De gezamenlijke oplossing is per direct beschikbaar via de verkoopkanalen en partnernetwerken van Cloudera en VAST Data. Branchegerichte referentiearchitecturen en aanvullende oplossingen volgen later dit jaar.
Bron: Cloudera
