De Apache Software Foundation heeft Apache Hive 4.0 aangekondigd. Al meer dan tien jaar is Apache Hive de hoeksteen van datawarehouse- en data lake-architecturen. Het stelt bedrijven en organisaties wereldwijd in staat om analyses uit te voeren op een ongekende schaal, terwijl enorme hoeveelheden gegevens naadloos worden beheerd via SQL-query's.
Sinds de release in 2010 is Apache Hive geëvolueerd om te voldoen aan de steeds groeiende eisen van modern data management door een gedistribueerd, fouttolerant datawarehouse systeem te bieden dat bekend staat om zijn schaalbaarheid en betrouwbaarheid. Met ondersteuning voor Kerberos-authenticatie en naadloze integratie met Apache Ranger en Apache Atlas voor verbeterde beveiliging en observability, is Hive een van de beste oplossingen geworden voor bedrijven die op zoek zijn naar robuuste oplossingen voor data management.
Het hart van Apache Hive wordt gevormd door de Hive Metastore (HMS), een gecentraliseerde opslagplaats van metadata die dient als fundamentele bouwsteen voor data lakes. Hive maakt gebruik van een groot aantal open source technologieën, waaronder Apache Spark, Presto en Trino. De Hive Metastore biedt naadloze toegang tot metadata voor verschillende clients, waaronder Hive, Apache Impala en Spark, en is daarmee een essentieel onderdeel van het moderne data-ecosysteem.
Wat is nieuw in Apache Hive 4.0?
Apache Hive 4.0 bevat meer dan 5.000 commits, waaronder nieuwe functies, bugfixes en prestatieverbeteringen. De belangrijkste hoogtepunten van Apache Hive 4.0 zijn:
• Hive Iceberg Integratie: Stroomlijnt data management met naadloze integratie van Apache Iceberg tabellen;
• Verbeterde transactie- en lockingmogelijkheden: Verbetert de ACID-conformiteit van Hive;
• Tabelonderhoud: Introduceert verdichtingsmechanismen voor zowel Hive ACID- als Iceberg-tabellen om opslag en prestaties te optimaliseren;
• Docker-ondersteuning voor Hive: Vereenvoudigt de implementatie met officiële Apache Hive Docker-images voor eenvoudigere installatie en configuratie. Ontdek de Docker-images op Docker Hub voor naadloze implementatie;
• Verbeteringen aan de compiler: Anti-join ondersteuning, branch pruning, kolom histogram statistieken, HPL/SQL ondersteuning, geplande query's, nieuwe en verbeterde kostengebaseerde optimalisatie (CBO) regels die leiden tot betere queryplannen;
• Ondersteuning voor gematerialiseerde schermen: Maakt het maken en beheren van gematerialiseerde views mogelijk voor snellere queryverwerking;
• Runtime-optimalisaties: Verbetert de queryprestaties met optimalisaties in Apache Tez en Apache Hive LLAP, waardoor gegevens sneller worden verwerkt;
• Hive-replicatie: Introduceert verbeterde replicatiefuncties voor zowel externe als ACID-tabellen voor efficiënte gegevensdistributie en disaster recovery; en
• Ondersteuning voor Apache Ozone: Introduceert ondersteuning voor Apache Ozone, waardoor naadloze integratie met op Ozone gebaseerde object stores mogelijk wordt voor schaalbare en efficiënte opslagoplossingen.
Bekijk de volledige lijst met wijzigingen op de Apache Hive Wiki.
15 oktober 2024 Workshop met BPM-specialist Christian Gijsels over AI-Gedreven Business Analyse met ChatGPT. Kunstmatige Intelligentie, ongetwijfeld een van de meest baanbrekende technologieën tot nu toe, opent nieuwe deuren voor analisten met i...
7 november (online seminar op 1 middag)Praktische tutorial met Alec Sharp Alec Sharp illustreert de vele manieren waarop conceptmodellen (conceptuele datamodellen) procesverandering en business analyse ondersteunen. En hij behandelt wat elke data-pr...
11 t/m 13 november 2024Praktische driedaagse workshop met internationaal gerenommeerde trainer Lawrence Corr over het modelleren Datawarehouse / BI systemen op basis van dimensioneel modelleren. De workshop wordt ondersteund met vele oefeningen en pr...
18 t/m 20 november 2024Praktische workshop met internationaal gerenommeerde spreker Alec Sharp over het modelleren met Entity-Relationship vanuit business perspectief. De workshop wordt ondersteund met praktijkvoorbeelden en duidelijke, herbruikbare ...
21 november 2024 Praktische en interactieve workshop met Nigel Turner Data-gedreven worden lukt niet door alleen nieuwe technologie en tools aan te schaffen. Het vereist een transformatie van bestaande business modellen, met cultuurverandering, een h...
26 en 27 november 2024 Organisaties hebben behoefte aan data science, selfservice BI, embedded BI, edge analytics en klantgedreven BI. Vaak is het dan ook tijd voor een nieuwe, toekomstbestendige data-architectuur. Dit tweedaagse seminar geeft antwoo...
28 november 2024Workshop met BPM-specialist Christian Gijsels over business analyse, modelleren en simuleren met de nieuwste release van Sparx Systems' Enterprise Architect, versie 16.Intensieve cursus waarin de belangrijkste basisfunctionaliteiten v...
De DAMA DMBoK2 beschrijft 11 disciplines van Data Management, waarbij Data Governance centraal staat. De Certified Data Management Professional (CDMP) certificatie biedt een traject voor het inleidende niveau (Associate) tot en met hogere niveaus van...
Deel dit bericht