<- alle projecten
Data architect VDK Groep
de organisatie
De VDK Groep is met 150+ installatiebedrijven, ruim 7000 vakmensen en meer dan 2 miljard euro omzet een van de grootste spelers in de Europese installatietechniek, actief in zes landen en hard groeiend door overnames.
de opdracht
Als data architect ben ik verantwoordelijk voor de hele dataketen en het centrale dataplatform van de groep. Ik heb het platform ontworpen en bouw er actief aan mee: een lakehouse op Azure Databricks dat elke nacht data van meer dan 150 bedrijven verwerkt, uit 80 bronnen verspreid over 20 verschillende bronsystemen. Schaalbaarheid en betrouwbaarheid staan voorop, want de groep groeit hard en de dataketen groeit mee.
wat ik deed
- Architectuur van de volledige dataketen en de Azure-infrastructuur ontworpen: medallion op Databricks met Unity Catalog en CI/CD via Databricks Asset Bundles
- Schaalbare ingestie in Python uit ERP-, project- en boekhoudpakketten via een uniform laadpatroon, zodat nieuwe overnames snel aansluiten
- Honderden dbt-modellen met tests, elke nacht automatisch en betrouwbaar gedraaid
- Releases via Azure DevOps met een dev-, acceptatie- en productiestraat
- Verantwoordelijk voor sprintplanning en de coördinatie van het ontwikkelteam, met directe afstemming met C-level over roadmap en prioriteiten
stack
DatabricksdbtPythonSQLAzureAzure DevOps