Apache Software Foundation kondigt Apache Hive 4.0 aan

De Apache Software Foundation heeft Apache Hive 4.0 aangekondigd. Al meer dan tien jaar is Apache Hive de hoeksteen van datawarehouse- en data lake-architecturen. Het stelt bedrijven en organisaties wereldwijd in staat om analyses uit te voeren op een ongekende schaal, terwijl enorme hoeveelheden gegevens naadloos worden beheerd via SQL-query's.

Sinds de release in 2010 is Apache Hive geëvolueerd om te voldoen aan de steeds groeiende eisen van modern data management door een gedistribueerd, fouttolerant datawarehouse systeem te bieden dat bekend staat om zijn schaalbaarheid en betrouwbaarheid. Met ondersteuning voor Kerberos-authenticatie en naadloze integratie met Apache Ranger en Apache Atlas voor verbeterde beveiliging en observability, is Hive een van de beste oplossingen geworden voor bedrijven die op zoek zijn naar robuuste oplossingen voor data management.

Het hart van Apache Hive wordt gevormd door de Hive Metastore (HMS), een gecentraliseerde opslagplaats van metadata die dient als fundamentele bouwsteen voor data lakes. Hive maakt gebruik van een groot aantal open source technologieën, waaronder Apache Spark, Presto en Trino. De Hive Metastore biedt naadloze toegang tot metadata voor verschillende clients, waaronder Hive, Apache Impala en Spark, en is daarmee een essentieel onderdeel van het moderne data-ecosysteem.

Wat is nieuw in Apache Hive 4.0?
Apache Hive 4.0 bevat meer dan 5.000 commits, waaronder nieuwe functies, bugfixes en prestatieverbeteringen. De belangrijkste hoogtepunten van Apache Hive 4.0 zijn:
• Hive Iceberg Integratie: Stroomlijnt data management met naadloze integratie van Apache Iceberg tabellen;
• Verbeterde transactie- en lockingmogelijkheden: Verbetert de ACID-conformiteit van Hive;
• Tabelonderhoud: Introduceert verdichtingsmechanismen voor zowel Hive ACID- als Iceberg-tabellen om opslag en prestaties te optimaliseren;
• Docker-ondersteuning voor Hive: Vereenvoudigt de implementatie met officiële Apache Hive Docker-images voor eenvoudigere installatie en configuratie. Ontdek de Docker-images op Docker Hub voor naadloze implementatie;
• Verbeteringen aan de compiler: Anti-join ondersteuning, branch pruning, kolom histogram statistieken, HPL/SQL ondersteuning, geplande query's, nieuwe en verbeterde kostengebaseerde optimalisatie (CBO) regels die leiden tot betere queryplannen;
• Ondersteuning voor gematerialiseerde schermen: Maakt het maken en beheren van gematerialiseerde views mogelijk voor snellere queryverwerking;
• Runtime-optimalisaties: Verbetert de queryprestaties met optimalisaties in Apache Tez en Apache Hive LLAP, waardoor gegevens sneller worden verwerkt;
• Hive-replicatie: Introduceert verbeterde replicatiefuncties voor zowel externe als ACID-tabellen voor efficiënte gegevensdistributie en disaster recovery; en
• Ondersteuning voor Apache Ozone: Introduceert ondersteuning voor Apache Ozone, waardoor naadloze integratie met op Ozone gebaseerde object stores mogelijk wordt voor schaalbare en efficiënte opslagoplossingen.

Bekijk de volledige lijst met wijzigingen op de Apache Hive Wiki.