ClickHouse 26.10 voegt LATERAL JOIN en LogsQL toe
ClickHouse heeft vorige week versie 26.10 van zijn opensource-database uitgebracht. Volgens ClickHouse is het de grootste release tot nu toe, met 104 nieuwe functies, 225 prestatieverbeteringen en 739 bugfixes. De belangrijkste vernieuwingen zijn experimentele ondersteuning voor LATERAL JOIN, joins met willekeurige voorwaarden en een nieuw querydialect voor logdata.
Met LATERAL JOIN kan een subquery in de FROM-clausule verwijzen naar tabellen die links ervan staan. Dat maakt een veelgebruikt SQL-patroon mogelijk: de top N per groep opvragen, bijvoorbeeld de twee meest gebruikte zoektermen per website. In Microsoft SQL Server heet die constructie CROSS APPLY. ClickHouse ondersteunt de varianten INNER en LEFT.
Volgens ClickHouse voert de database zo’n query uit zonder de subquery voor elke rij afzonderlijk te herhalen. De subquery draait één keer voor alle rijen, een LIMIT wordt omgezet in LIMIT BY en het resultaat wordt via een hash join gekoppeld. De functie is nog experimenteel en moet worden ingeschakeld met de instelling allow_experimental_lateral_join.
Joins zonder gelijkheidsvoorwaarde
Ook gewone joins zijn uitgebreid. Een JOIN accepteert nu een willekeurige ON-voorwaarde, ook zonder gelijkheid tussen twee tabellen. Tot nu toe leverde zo’n query een foutmelding op. ClickHouse voert de join in dat geval uit als block nested loop join, een algoritme dat volgens de changelog even traag is als een CROSS JOIN met een filter. Beheerders kunnen het gedrag aan- of uitzetten met de instelling allow_block_nested_loop_join.
LogsQL en overige vernieuwingen
Verder introduceert ClickHouse experimentele ondersteuning voor LogsQL, een querytaal voor logdata. ClickHouse vertaalt LogsQL-queries bij het parsen naar een gewone SELECT. In clickhouse-client en clickhouse-local wisselen gebruikers van dialect met het commando /dialect.
De release bevat bovendien functiecompositie, waarbij gebruikers functies kunnen koppelen met de notatie f | g. Grote sets in een IN-voorwaarde kunnen nu naar schijf uitwijken als het geheugen tekortschiet. Andere nieuwe functies zijn dictionaries op basis van XGBoost-modellen en SQLite als dataformaat.
Bron: ClickHouse
Beeld: ClickHouse




