Data Engineer AWS
Je maakt deel uit van een B2B-platform dat B2B-klanten bedient met elektriciteit/gas, producten en diensten, en groene energie. Het platform bestaat uit ongeveer 180 mensen, waarvan 125 aan de businesskant en 55 aan de IS- en datakant.
Wat je doet
We zoeken een ervaren Data Engineer om deel uit te maken van het Data-team van een organisatie. Je bent verantwoordelijk voor het ontwerpen en implementeren van schaalbare, efficiënte en robuuste data-oplossingen, -pipelines en -modellen, in lijn met interne standaarden. Het doel is om huidige en toekomstige datagedreven initiatieven te ondersteunen. Nauwe samenwerking met transversale teams, analisten en projectmanagers is essentieel om ervoor te zorgen dat gegevens beschikbaar, toegankelijk en bruikbaar zijn.
Verantwoordelijkheden.
- Ontwerpen, implementeren en onderhouden van schaalbare data-architecturen (databases, data lakes op AWS, data warehouses), in overeenstemming met bestaande tools en frameworks.
- Bouwen en optimaliseren van ETL-processen (Extract, Transform, Load) om gegevens van verschillende bronnen naar de datawarehouses over te dragen.
- Combineren van diverse databronnen in coherente en uniforme weergaven (gold datasets) voor analyse en rapportage.
- Garanderen van de consistentie, kwaliteit en betrouwbaarheid van gegevens gedurende hun hele levenscyclus.
- Beheren en optimaliseren van de data-infrastructuur (opslag, verwerking, restitutie) in termen van efficiëntie, capaciteit en kosten.
- Een Tech Lead-rol vervullen om andere Data Engineers te begeleiden en goede ontwikkelingspraktijken te promoten.
- Ontwikkelen en onderhouden van dataverwerkingscode in Python, Spark, SQL, en automatiseren van reguliere uitvoeringen.
- Samenwerken met transversale teams, analisten en ontwikkelaars om databehoeften te begrijpen en passende oplossingen te leveren.
- Interactie met zakelijke belanghebbenden om hun datagerelateerde behoeften te verzamelen en te begrijpen.
- Werken met diverse teams om de schaalbaarheid, beveiliging en prestaties van datasystemen te garanderen.
- Creëren en onderhouden van uitgebreide documentatie van data-processen, -pipelines en -architecturen.
- Monitoren van de productiesystemen van het dataplatform.
- Delen van best practices met alle data-, IT- en zakelijke belanghebbenden.
Eisen
- Aantoonbare ervaring als Senior Data Engineer of vergelijkbare functie.
- Bevestigde ervaring in het beheer van dataplatforms.
- Beheersing van AWS-services: S3, Athena, Glue, Redshift.
- Beheersing van Databricks (bij voorkeur op AWS).
- Sterke vaardigheden in Python, Spark, SQL of een andere data engineering-taal.
- Ervaring met dataverwerkingstechnologieën.
- Kennis van Agile-methodologieën (Scrum, Kanban).
- Kennis van Dataiku.
- Kennis van Azure DevOps en release-pipelines.
- AWS Cloud Data Engineer-certificering.
Wensen
- Kennis van systemen zoals Salesforce, SAP ISU.
- Kennis van Agile-tools zoals Azure DevOps of Jira.
- Bekendheid met financiële afsluitingsrapporten is een pluspunt.
- Andere AWS-certificeringen (Solution Architect, Systems Administrator).
Profiel
- Teamgeest.
- Goede communicatie, met name om technische concepten te vulgariseren voor niet-technische managers.
- Vermogen om te werken in een multiculturele en internationale omgeving.
- Aanpassingsvermogen aan technologische ontwikkelingen en veranderende projectbehoeften.
- Rigoureuze organisatie en oog voor detail.
- Bachelordiploma of Masterdiploma.
- Minimaal 5 jaar ervaring als Data Engineer of in een vergelijkbare rol.
Talen.
- Beheersing van Nederlands of Frans.
- Beheersing van Engels.
Hoe solliciteren?
Bekijk de volledige opdrachttekst en sollicitatie-informatie zodra je sollicitatie op maat klaarstaat.
Bestel een sollicitatie op maat om de volledige opdracht en sollicitatie-informatie te bekijken.
Meer context, minder losse zoekuren.
Je krijgt net genoeg context om te beoordelen of deze opdracht interessant is. De volledige briefing, klantdetails en vervolgstappen blijven beschikbaar in de app.