The Linux Foundation heeft de algemene beschikbaarheid aangekondigd van de Delta Lake 3.0 release van het open-source Delta Lake project. Deze versie van Delta Lake, ontwikkeld onder de vlag van The Linux Foundation, verenigt lakehouse opslagformaten en geeft gebruikers flexibiliteit en controle over hun gegevens.
Gebruikers kunnen nu gebruik maken van Delta Lake 3.0 om hun datamanagementprocessen te stroomlijnen, prestaties te optimaliseren en flexibiliteit te vergroten. De belangrijkste kenmerken van Delta Lake 3.0 zijn:
Delta Universeel Formaat (UniForm): Bedrijven hebben lang geworsteld met de beslissing welk opslagformaat te standaardiseren in hun streven naar het creëren van een naadloos data lakehouse. UniForm is een innovatieve functie die het lezen van gegevens vergemakkelijkt in het formaat dat wordt vereist door de applicatie, wat zorgt voor een verhoogde compatibiliteit en een breder ecosysteem. Met UniForm zijn de uitdagingen van het kiezen tussen Apache Iceberg of Apache Hudi verdwenen. Delta genereert nu moeiteloos de essentiële metadata voor beide, waardoor handmatige conversies niet meer nodig zijn en een ongeëvenaarde laag van flexibiliteit en efficiëntie wordt geboden.
Delta kernel: Het uitgebreide connectorlandschap voor Delta stelt ontwikkelaars vaak voor uitdagingen. Delta Kernel is gericht op het stroomlijnen van het proces van het bouwen van Delta-connectoren en biedt een vereenvoudigde API, zodat ontwikkelaars gebruik kunnen maken van het volledige aanbod van Delta zonder verstrikt te raken in de onderliggende complexiteit. Door de ingewikkelde details van de Delta-protocolspecificatie te verbergen, kunnen ontwikkelaars zich concentreren op het benutten van het potentieel van Delta.
Snellere MERGE en updates: Met Delta 3.0 maakt MERGE nu beter gebruik van data skipping, de mogelijkheid om het insert-only codepad in meer gevallen te gebruiken en een algehele verbeterde uitvoering om tot twee keer betere prestaties te bereiken in verschillende scenario's. DELETE-bewerkingen zijn nu meer dan twee keer sneller. Snellere DELETE-bewerkingen leiden tot kortere wachttijden bij het wissen of bijwerken van gegevens, waardoor gegevens flexibeler kunnen worden beheerd en verwerkt.
Bekijk hier de gedetailleerde release notes.
Blog voor meer informatie over Delta Lake 3.0.
15 oktober 2024 Workshop met BPM-specialist Christian Gijsels over AI-Gedreven Business Analyse met ChatGPT. Kunstmatige Intelligentie, ongetwijfeld een van de meest baanbrekende technologieën tot nu toe, opent nieuwe deuren voor analisten met i...
17 oktober 2024 Praktische workshop Datavisualisatie - Dashboards en Data Storytelling. Hoe gaat u van data naar inzicht? En hoe gaat u om met grote hoeveelheden data, de noodzaak van storytelling en data science? Lex Pierik behandelt de stromingen i...
7 november (online seminar op 1 middag)Praktische tutorial met Alec Sharp Alec Sharp illustreert de vele manieren waarop conceptmodellen (conceptuele datamodellen) procesverandering en business analyse ondersteunen. En hij behandelt wat elke data-pr...
11 t/m 13 november 2024Praktische driedaagse workshop met internationaal gerenommeerde trainer Lawrence Corr over het modelleren Datawarehouse / BI systemen op basis van dimensioneel modelleren. De workshop wordt ondersteund met vele oefeningen en pr...
18 t/m 20 november 2024Praktische workshop met internationaal gerenommeerde spreker Alec Sharp over het modelleren met Entity-Relationship vanuit business perspectief. De workshop wordt ondersteund met praktijkvoorbeelden en duidelijke, herbruikbare ...
21 november 2024 Praktische en interactieve workshop met Nigel Turner Data-gedreven worden lukt niet door alleen nieuwe technologie en tools aan te schaffen. Het vereist een transformatie van bestaande business modellen, met cultuurverandering, een h...
26 en 27 november 2024 Organisaties hebben behoefte aan data science, selfservice BI, embedded BI, edge analytics en klantgedreven BI. Vaak is het dan ook tijd voor een nieuwe, toekomstbestendige data-architectuur. Dit tweedaagse seminar geeft antwoo...
28 november 2024Workshop met BPM-specialist Christian Gijsels over business analyse, modelleren en simuleren met de nieuwste release van Sparx Systems' Enterprise Architect, versie 16.Intensieve cursus waarin de belangrijkste basisfunctionaliteiten v...
Deel dit bericht