Naar hoofdinhoud
DNMP
Data Engineering

Bouw het datafundament dat AI-toepassingen nodig hebben

AI-modellen zijn zo goed als de data waarop ze draaien. Deze intensieve dag leert je de patronen achter robuuste, AI-klare data-pipelines: van bronintegratie en transformatie tot datakwaliteit en monitoring.

Wat je leert

  • Pipeline-architectuur

    Batch vs. streaming, medallion-architectuur, bronintegratie-patronen — wanneer kies je wat.

  • Transformatie met dbt

    Modulair SQL schrijven, testen op datakwaliteit, documentatie automatiseren. Van staging tot mart.

  • Datakwaliteit & testing

    Freshness checks, schema-tests, anomaly-detection — ingebouwd in de pipeline.

  • Monitoring & observability

    Hoe je weet dat je pipeline werkt — en hoe je het weet als dat niet zo is.

Programma

Een dag in detail — zonder verrassingen.

# Tijd Module Inhoud
1 09:00–09:30 Start & stack-check Huidige architectuur ophalen, gereedschapcheck, dagoverzicht.
2 09:30–10:45 Pipeline-architectuur Medallion-lagen, batch/streaming-afweging, connector-patronen. Architectuur tekenen voor een eigen use case.
— 10:45–11:00 Pauze
3 11:00–12:30 dbt in de praktijk Staging-, intermediate- en mart-modellen bouwen. Tests schrijven en documentatie genereren.
— 12:30–13:15 Lunch
4 13:15–14:30 Datakwaliteit inbouwen Great Expectations of dbt-tests — freshness, not-null, referential integrity. Triage-flow bij fouten.
— 14:30–14:45 Pauze
5 14:45–16:00 Monitoring & alerting Lineage, SLA-checks, alerting-patterns. Hands-on met een echt dashboard.
6 16:00–17:00 Eigen pipeline reviewen Deelnemers reviewen elkaars pipeline-ontwerp op basis van de dag. Concrete verbeterpunten.

Direct resultaat

  • Eigen pipeline-architectuur getekend en gereviewed
  • Werkende dbt-modellen inclusief tests
  • Datakwaliteits-checklist voor jouw stack

Lange termijn

  • Minder data-incidenten door ingebouwde kwaliteitscontroles
  • Snellere onboarding van nieuwe teamleden
  • Pipelines die stakeholders durven vertrouwen

Voor wie?

  • Data engineers
  • Analytics engineers
  • Software developers
  • BI developers

Over de trainer

Pascal Mertens

Co-founder & Data- en Analytics Consultant

Co-founder van DNMP en econoom (Universiteit van Amsterdam) met een scherpe focus op data, BI en analytics. Pascal richtte eerder Vizieo op, een bedrijf in datavisualisatie en analytics. Vandaag helpt hij bij DNMP organisaties om data om te zetten in concrete inzichten en betere beslissingen.

LinkedIn

Ervaringen van deelnemers

We zijn gestopt met ad-hoc scripts en bouwen nu echt modulaire pipelines. dbt was een openbaring.
Koen van Leeuwen — Data Engineer, FinTech
De medallion-architectuur was voor mij al bekend in theorie — na deze dag snap ik wanneer je van aanpak wisselt.
Jeroen Willems — Analytics Engineer, Scale-up
Datakwaliteit was altijd een bijzaak. Nu zit het ingebakken in elke pipeline die we bouwen.
Sophie Kramer — BI Developer, Retailer
Het peer-review aan het einde was keihard maar waardevol. Blinde vlekken in mijn architectuur ontdekt die ik al maanden meesleepte.
Mark Jansen — Software Developer, SaaS-bedrijf
Onze stakeholders vertrouwen de data nu. Dat is geen kleine stap — dat is een cultuurverandering.
Fatima El Amrani — Lead Data Engineer, Zorginstelling

Plan een intake — wij stemmen de stack-keuzes en use cases af op jullie huidige omgeving.

Twijfel je over de fit?

Plan een intake — we sparren 30 minuten over jouw doelen en geven een eerlijk advies.

Plan een intake