Een belangrijke drijfveer achter de ontwikkeling van QUIPU4 is het streven om organisaties te helpen bij het terugdringen van het ondernemersrisico waar het ontwikkeling van data-oplossingen betreft. Toegang tot goed gestructureerde data wordt met de dag belangrijker. Met als gevolg, dat onderliggende data-oplossingen meer en meer tot de kritische toepassingen behoren. Data-oplossingen waar men op kan vertrouwen. Die men eenvoudig kan aanpassen en uitbreiden. Oplossingen die ook goed overdraagbaar zijn en bovendien goed te monitoren en te auditen zijn.
Helaas worden nog steeds te veel oplossingen voornamelijk handmatig ontwikkeld door mensen in wisselende projectteams. Mensen met ieder zo hun overtuigingen over wat de beste architectuur of technologie is, wat dan zichtbaar wordt als een lappendeken in de gerealiseerde oplossing. Daarnaast is de documentatie veelal onvoldoende of deze ontbreekt volledig. Dit heeft als gevolg, dat ontwikkelde oplossingen maar een geringe levensverwachting hebben. Omdat de business-case om in het verleden gerealiseerde, suboptimale oplossingen te vervangen vaak moeilijk te maken is blijven veel legacy systemen vaak (te) lang voortbestaan. Op termijn in leven gehouden op de intensive care van de IT afdeling, kostbare resources verbruikend. Terugkijkend zien we dan ook een kerkhof vol goede bedoelingen. De kosten van doorontwikkeling staan niet langer in verhouding tot de onderkende business cases.
Model-naar-model conversie
QUIPU 4 is een platform dat model-naar-model-conversie ondersteunt. Dit is waar het product zich onderscheidt van gangbare ETL-tools en andere datawarehouse automatiseringstools. Deze tools werken doorgaans goed bij het transformeren en manipuleren van data op entiteit- of attribuutniveau, maar missen de ondersteuning voor het definiëren en ontwikkelen van transformaties op modelniveau. Het is op dit hogere niveau dat patronen kunnen worden gevonden en toegepast en dus kunnen worden gegenereerd. Waarbij nog steeds de uitzonderingen op deze patronen op entiteit- of attribuut niveau kunnen worden gespecificeerd. Dit levert volgens QOSQO een veel efficiëntere manier op om snel nieuwe data solutions te ontwikkelen.
Risicomatrix
Het team achter QUIPU4 heeft een visie. Een stip aan de horizon. Die hebben we geprobeerd te vangen in de door ons bedachte onderstaande matrix. Met de bedoeling dat deze een leidraad kan zijn voor de verdere doorontwikkeling van het product.
Figuur 1. Risico matrix met betrekking tot automatisering van data-oplossingen.
Op de verticale as zijn de diverse aspecten te vinden, die zo kenmerkend zijn voor de ontwikkeling van data-oplossingen. Zaken als datamodellen, laadroutines, transformaties (rekenregels), proces controle (laadproces), gebruik van meta-data en tot slot de wijze van uitrol van nieuwe ontwikkelingen.
Horizontaal is sprake van een zekere toename van rijpheid (maturity). Van een hoog-risico-benadering vanwege zaken als handmatig ontwerp van data modellen en dito codering van de oplossing, geen slim gebruik maken van metadata, toolafhankelijkheid tot de afwezigheid van risico, doordat zowel datamodellen als laadcode worden gegenereerd. Tot aan de andere kant van het spectrum: volledig metadata gedreven ontwikkeling, gebaseerd op één centrale repository. Waarbij productiepromotie (deployment)volledig autonoom plaatsvindt. Een oplossing die zélf wijzigingen in de omgeving detecteert en deze automatisch kan toepassen en uitrollen (adaptive).
QUIPU4 ondersteunt momenteel grotendeels de derde kolom: metadata-driven ontwikkeling. Maar de eerste stappen zijn al gezet om change handling te ondersteunen.
Als voorbeeld is er in QUIPU4 reeds een module voorhanden, waarmee we modelwijzigingen kunnen detecteren en rapporteren. Een volgende logische stap is het geautomatiseerd doorvoeren van sommige van deze wijzigingen in de gegenereerde data-oplossingen, als eerste stap in de richting van adaptive oplossingen. Hierbij zullen Artificial Intelligence- en Machine Learning-technieken onontbeerlijk zijn om de impact van wijzigingen in de omgeving te vertalen naar zinvolle aanpassingen in de data keten.
QUIPU4
Voor meer informatie, een whitepaper en een uitgebreide handleiding bezoek www.quipu.nl. Heeft u interesse in QUIPU4? U kunt een gratis licentie voor één maand aanvragen via onze website. Indien gewenst verzorgen wij voor u een demo.
21 en 22 maart 2023 Organisaties hebben behoefte aan data science, selfservice BI, embedded BI, edge analytics en klantgedreven BI. Vaak is het dan ook tijd voor een nieuwe, toekomstbestendige data-architectuur. Dit tweedaagse seminar geeft antwoord ...
4 april 2023 (Face-to-face én Live Video Stream) Schrijf in voor al weer de tiende editie van ons jaarlijkse congres met wederom een ijzersterke sprekers line-up. Op deze editie behandelen wij belangrijke thema’s als Datamesh, Analytics ...
5 april 2023 Praktisch en interactief seminar met Nigel Turner Data-gedreven worden lukt niet door alleen nieuwe technologie en tools aan te schaffen. Het vereist een transformatie van bestaande business modellen, met cultuurverandering, een herontwe...
5 april 2023 (halve dag)Praktische workshop met Alec Sharp This workshop introduces concept modelling from a non-technical perspective, provides tips and guidelines for the analyst, and explores entity-relationship modelling at conceptual and logical...
5 april 2023 (halve dag)Praktische workshop door Thomas Frisendal In deze workshop van een halve dag zal de Deense expert Thomas Frisendal laten zien wat graph technologieën in de praktijk betekenen. Hij zal ook laten zien hoe graph oplossi...
13 april 2023 Praktische workshop Datavisualisatie en Human Data Stories. Hoe gaat u van data naar inzicht? En hoe gaat u om met grote hoeveelheden data, de noodzaak van storytelling, data science en de data artist? Lex Pierik behandelt de stromingen...
8 t/m 10 mei 2023 Praktische workshop Data Management Fundamentals door Chris Bradley - CDMP-examinatie optioneel De DAMA DMBoK2 beschrijft 11 disciplines van Data Management, waarbij Data Governance centraal staat. De Certified Data Managemen...
11 en 12 mei 2023 Praktische workshop Data Governance & Stewardship door Chris Bradley - CDMP-examinatie optioneel Wat betekent Data Governance eigenlijk, hoe kunnen we het praktisch laten werken en wat zijn de implicaties? Deze 2-daagse cursus bie...
Deel dit bericht