Het datawarehouse als fundament

Voordat jij naar de componenten kijkt, is het goed te begrijpen hoe zij samenhangen.

Drie lagen, één samenhangend geheel

Het datawarehouse is gemodelleerd naar de processen van de organisatie, niet naar de structuur van de bronsystemen. Dat maakt het duurzaam — ook als bronsystemen na een aanbesteding wisselen, blijft het datawarehouse intact. De opzet volgt het Gemeentelijk Gegevensmodel (GGM) van de VNG als logisch uitgangspunt, en Genesee Datavault als methodiek voor de centrale opslaglaag.

Staging

Tijdelijke opslag van ruwe brongegevens. Vluchtig — alleen bedoeld om gegevens uniform binnen te halen voor verdere verwerking.

Datavault (integratie)

Het hart van het platform. Hier worden gegevens geïntegreerd uit meerdere bronnen, wordt historie opgebouwd en vindt de overgang plaats van bronsysteem-denken naar organisatieproces-denken.

Datamart (bevraging)

De laag die toegankelijk is voor gebruikers en visualisatietools. Dimensionele stermodellen volgens Kimball — geoptimaliseerd voor snelle bevragingen en begrijpelijke structuur.

Elke keuze onderbouwd

Opslag
Fundament
PostgreSQL PostGIS pg_duckdb pgaudit PgBackRest DBeaver

Het onwrikbare fundament onder jouw platform

PostgreSQL is de vierde meest gebruikte database ter wereld en als enige open source database meerdere keren uitgeroepen tot database van het jaar. Jepsen — wereldwijd het strengste, meest gevreesde testlab voor databasecorrectheid — onderwierp PostgreSQL aan zijn beruchte stresstests en vond de transacties waterdicht: geen vuile data, geen verloren wijzigingen, een ijzersterke naleving van de ACID-regels die garandeert dat jouw cijfers altijd kloppen. Dezelfde rotsvaste basis waarop reuzen als Apple, Instagram en Spotify draaien. En waar organisaties voor Oracle of SQL Server tienduizenden euro's per jaar neertellen, krijg jij precies die kracht volledig gratis.

Een snelheidsmonster onder de motorkap

Met DuckDB onder de motorkap heb jij een waar snelheidsmonster in huis: analyses en dashboards die 16 tot 26 keer sneller op jouw scherm worden gestampt dan met een standaard PostgreSQL. In extreme gevallen zijn versnellingen tot 1.500 keer gemeten. Voel de brute kracht — wachttijden die vroeger seconden of minuten duurden, smelten weg tot een oogwenk. En het mooiste: al jouw vertrouwde toepassingen blijven gewoon tegen PostgreSQL praten, terwijl de DuckDB-motor onzichtbaar het zware werk verzet.

Compleet uitgerust, zonder meerprijs

PostGIS tovert rijke geografische kracht in jouw database — coördinaten, ruimtelijke berekeningen, kaartlagen — pal naast al jouw andere gegevens. pgaudit legt messcherp elke handeling vast, exact zoals BIO2 eist. En PgBackRest? Die brengt jou na elke denkbare calamiteit moeiteloos terug naar elk gewenst moment in de tijd. Alles inbegrepen, niets bij te kopen.

Gegevensverwerking
Verwerking, orkestratie en analyse
Apache Hop Airflow Python Spyder Apache Tika GeoServer

Gebouwd door de meesters zelf

Apache Hop is gebouwd door precies dezelfde experts die Pentaho Data Integration groot maakten — een van de meest gebruikte ETL-tools ter wereld. Toen de eigenaar de gratis versie van Pentaho de nek omdraaide, stond Hop er al: sneller, slanker en volledig gratis. In de strakke, visuele ontwerpomgeving bouw jij in een handomdraai complexe gegevenspijplijnen — slepen, neerzetten, klaar — zonder eindeloos te programmeren. Ingebouwde tests bewaken bij elke stap de kwaliteit van jouw werk, en versiebeheer is van meet af aan ingebakken.

Onvermoeibare orkestratie, volledig op de automatische piloot

Apache Airflow is al jaren de onbetwiste nummer één voor het betrouwbaar orkestreren van een heel woud aan brokken code. Oorspronkelijk gebouwd door Airbnb, inmiddels het kloppend hart van de gegevensverwerking bij ontelbare organisaties wereldwijd. Elke nacht bewaakt het feilloos jouw verladingen: het regelt de volgorde, vangt fouten op, herstart wat misgaat en houdt alles haarscherp bij. Jij slaapt rustig, terwijl Airflow onvermoeibaar doorwerkt.

Python, Apache Tika en GeoServer — flexibel en krachtig

Python pakt moeiteloos de grillige klussen op waar visuele tools tekortschieten — denk aan het uitlezen van API's en maatwerk-transformaties. Apache Tika, beproefd in de wereld van gigantische documentarchieven, hengelt waardevolle tekst en metadata op uit vergunningen, raadsstukken en WOO-verzoeken, klaar voor diepgaande analyse. En GeoServer? Die ontsluit jouw geodata in glasheldere standaardformaten, zodat ruimtelijke informatie naadloos doorstroomt naar verwerking en visualisatie.

Visualisatie
Dashboards en analyse
Apache Superset Metabase Grafana

Inzicht dat iedereen begrijpt — op elk niveau

Jij kiest de visualisatietool die naadloos past bij jouw organisatie en jouw mensen. Apache Superset — gebouwd door Airbnb en omarmd door techgiganten wereldwijd — geeft jouw BI-ontwikkelaars de volledige vrijheid om adembenemende, complexe dashboards te bouwen. Metabase nodigt juist iedere medewerker uit om zelf op ontdekking te gaan: de verfrissend eenvoudige interface maakt vragen stellen kinderspel, zonder ook maar een letter SQL. En Grafana bundelt zijn legendarische monitoringkracht met volwaardige BI — onverslaanbaar voor dashboards die altijd, tot op de seconde, actueel zijn.

Visualisatie die in één oogopslag overtuigt

Jij krijgt geen wirwar aan misleidende grafieken, maar heldere visualisaties volgens de beproefde methodiek van Stephen Few — wereldwijd dé autoriteit op het gebied van kwantitatieve visualisatie. Zijn principe is even simpel als krachtig: elke vraag verdient precies het juiste grafiektype. Tijdreeksen, rangschikkingen, afwijkingen, verdelingen — elk in zijn meest doeltreffende vorm. Het resultaat? Dashboards die in één oogopslag vertellen wat er speelt. Geen ruis, geen versiering, puur inzicht.

Catalogus
Definities en lineage
OpenMetadata Draw.io

Altijd grip op wat jouw gegevens betekenen

OpenMetadata is het kloppend kennishart van jouw platform — gebouwd door het team achter de data-infrastructuur van Uber, inmiddels draaiend bij meer dan 3.000 organisaties wereldwijd. Het is de ene plek waar iedereen, van ontwikkelaar tot controller, razendsnel antwoord vindt op de vraag: wat betekent dit gegeven, waar komt het vandaan en wie gaat erover? Met meer dan 100 kant-en-klare koppelingen verbindt het moeiteloos databases, dashboards en gegevensstromen tot één glasheldere, doorzoekbare catalogus. Definities, begrippen, eigenaren, logica, technische details — alles overzichtelijk bij elkaar, altijd actueel. Nooit meer zoeken, nooit meer gissen.

Volg elk cijfer feilloos terug naar de bron

Lineage is jouw geheime wapen bij verantwoording. Het legt de complete reis van elk gegeven vast: van het bronsysteem, via de datavault, tot het exacte cijfer op jouw dashboard. Vraagt een accountant of toezichthouder hoe een financieel getal tot stand kwam? Jij toont het met een paar klikken, zwart op wit. Dat geeft je niet alleen rust — dat geeft je gezag.

Eén gemeenschappelijke taal voor iedereen

In een gemeentelijke omgeving vormt het Gemeentelijk Gegevensmodel van de VNG de stevige terminologische ruggengraat van jouw datawarehouse. In OpenMetadata houd jij die begrippen helder en levend — zodat ontwikkelaars, beleidsmedewerkers en controllers altijd exact dezelfde taal spreken. Geen misverstanden meer, geen eindeloze discussies over wat een begrip nu precies inhoudt. En werk jij buiten de gemeentelijke wereld? Dan vormt de Data Vault-methodiek in de kern van het platform het flexibele, uitbreidbare fundament dat zich moeiteloos plooit naar jouw eigen sector en begrippenkader.

Toegang en identiteit
SSO en beveiliging
Keycloak Vaultwarden Nginx

Eén sleutel tot alles — ijzersterk beveiligd

Keycloak is een identiteitswachter van wereldklasse, gebouwd door Red Hat — de naam achter de meest gebruikte zakelijke Linux ter wereld. Het beveiligt de toegang voor Japanse banken volgens de strengste financiële normen en regelt de aanmelding van het Oostenrijkse overheidsportaal met meer dan twee miljoen gebruikers. Met één enkel account openen jouw gebruikers moeiteloos de deur naar Superset, Airflow, Forgejo, OpenMetadata én Cockpit. Geen losse wachtwoorden, geen zwakke plekken, geen gedoe. Tweefactorauthenticatie zit standaard ingebakken. En gebruik jij al Microsoft Entra ID? Dan koppel je dat naadloos — zonder ook maar een greintje afhankelijkheid van Microsoft op te lopen.

Jouw wachtwoorden, jouw kluis, jouw controle

Vaultwarden is een volledig gratis, open source krachtpatser gebouwd op het Bitwarden-protocol — een van de meest vertrouwde en streng geauditeerde wachtwoordmanagers ter wereld. Het draait als één rank containertje op jouw eigen infrastructuur. Jouw wachtwoorden verlaten nooit jouw eigen omgeving. En alle vertrouwde Bitwarden-clients sluiten er feilloos op aan: browser-extensies, mobiele apps en de webinterface.

Beheer en monitoring
Inzicht in de infrastructuur
Cockpit Grafana Prometheus Forgejo Taiga

Problemen opgelost voordat jij ze merkt

Prometheus — wereldwijd dé standaard voor open source monitoring — houdt onvermoeibaar elk onderdeel van jouw platform in de gaten. CPU, geheugen, schijfruimte, reactietijden, foutmeldingen: niets glipt ongemerkt langs. Grafana giet die metingen in glasheldere, realtime dashboards en slaat onmiddellijk alarm zodra een grenswaarde in zicht komt. Sluimerende problemen worden in de kiem gesmoord — vaak nog voordat jij ook maar het flauwste vermoeden had dat er iets speelde.

Elke wijziging vastgelegd, elke fout in seconden teruggedraaid

Forgejo is een keiharde, volledig zelfgehoste Git-omgeving — net zo krachtig als GitHub, maar zonder ook maar één draadje naar een Amerikaanse cloudpartij. Het wordt bestuurd door Codeberg e.V., een Duitse non-profit met een democratisch gekozen raad: geen enkele eigenaar kan er ooit mee weglopen of de koers verkopen. De grootste Forgejo-omgeving herbergt al meer dan 300.000 projecten. Elke aanpassing aan jouw playbooks en workflows ligt vast: wie, wat, wanneer en waarom. Gaat er na een update iets onverwachts mis? Dan spring jij in seconden terug naar een werkende versie. Dat geeft jou de vrijheid om te blijven verbeteren, zonder ook maar een spoor van angst.

Beheer zonder kopzorgen, planning zonder papierwerk

Cockpit zet een kraakheldere beheerconsole voor jouw servers in elke browser — diensten, logboeken, netwerk, updates — zonder dat je ook maar een commando hoeft in te tikken. En Taiga maakt jouw agile ontwikkelplanning glashelder: gebruikersverhalen, sprints en backlog, allemaal samengebracht in één strakke, prettige open source omgeving.

Ansible als rode draad

Het volledige platform — elk onderdeel, elke instelling — ligt vast in Ansible-playbooks. Dat betekent dat jij het complete platform op elke server foutloos en identiek uitrolt: geen handmatig geknutsel, geen verborgen instellingen, geen verrassingen. Eén commando, en alles staat. De playbooks zijn bovendien openbaar in te zien via Forgejo — volledige transparantie, niets verstopt.

Vragen over de componenten?

Neem contact op met Alovin voor een gesprek
over de technische opzet voor uw situatie.