Data Engineer
Je werkt binnen een grote organisatie. Je komt terecht in een team dat kritische financiële data uit interne en externe bronnen ontsluit voor de operatie en voor analysedoeleinden. Het team bouwt op dit moment een nieuw analyseplatform volledig in Azure Databricks en beheert daarnaast meerdere grote cloud datawarehouses. Je werkt nauw samen met data engineers, analisten en het platformteam.
Wat je doet
- Ontwerpen, ontwikkelen en optimaliseren van data pipelines binnen Azure Databricks
- Realiseren van data-ingestie-, transformatie- en verrijkingsprocessen met Python, PySpark en SQL
- Inrichten en beheren van lakehouse-architecturen volgens de medallion-architectuur
- Ontwikkelen en onderhouden van Databricks notebooks, workflows en Unity Catalog-structuren
- Implementeren van Infrastructure as Code en CI/CD-processen binnen Azure DevOps
- Opzetten en uitvoeren van unit-, integratie- en regressietesten
- Toepassen van software engineering best practices, waaronder versiebeheer, code reviews, linting en security scanning
- Samenwerken met data engineers, analisten en het platformteam om hoogwaardige data-oplossingen te realiseren
Profiel
Je combineert diepgaande kennis van Azure en Databricks met sterke software engineering principes. Je bent proactief, gestructureerd en nauwkeurig, en je hebt echt gevoel voor data.
Eisen
- Minimaal 5 jaar werkervaring met Data Engineering in de Azure Cloud omgeving
- Minimaal 5 jaar werkervaring met Python en PySpark
- Minimaal 5 jaar werkervaring met SQL in een enterprise omgeving
- Minimaal 3 jaar werkervaring met Databricks notebooks, pipelines en Unity Catalog
- Minimaal 3 jaar werkervaring met Infrastructure as Code en Azure DevOps CI/CD pipelines
- Minimaal 2 jaar werkervaring met data lakehouses (bijv. medallion-structuur)
- Aantoonbare ervaring met testen (unit- en regressietesten)
- Aantoonbare ervaring met Git, code linting en code scanning
- Minimaal HBO denk- en werkniveau
- Goede schriftelijke en mondelinge vaardigheden in de Nederlandse taal
Wensen
- Ervaring met het ontwerpen en bouwen van dimensionele modellen
- Minimaal 2 jaar ervaring met Data Vault 2.0
- Minimaal 3 jaar ervaring met data engineering / BI binnen de financiële sector
- Minimaal 3 jaar ervaring met Azure Data Factory
- Minimaal 3 jaar ervaring met Azure Synapse Analytics
- Databricks-certificering (Data Engineer Associate of Professional)
Hoe solliciteren?
Bekijk de volledige opdrachttekst en sollicitatie-informatie zodra je sollicitatie op maat klaarstaat.
Bestel een sollicitatie op maat om de volledige opdracht en sollicitatie-informatie te bekijken.
Meer context, minder losse zoekuren.
Je krijgt net genoeg context om te beoordelen of deze opdracht interessant is. De volledige briefing, klantdetails en vervolgstappen blijven beschikbaar in de app.