Data Engineer
Een belangrijke speler in de Belgische publieke sector zoekt een ervaren Data Engineer (ETL/ELT) om bij te dragen aan de implementatie en evolutie van een bedrijfsreferentie. Het project heeft als doel de kwaliteit, consistentie, uniciteit en herbruikbaarheid van gegevens te verbeteren, duplicaties te verminderen en het "Only Once"-principe te ondersteunen.
Wat je doet
- Ontwerpen en implementeren van processen voor gegevensintegratie, -consolidatie en kwaliteitscontrole.
- Definiëren van mechanismen voor het genereren en beheren van een unieke bedrijfsidentificatie.
- Opzetten van regels voor deduplicatie, consolidatie en prioritering van bronnen.
- Definiëren van mechanismen voor conflicthantering tussen verschillende gegevensbronnen.
- Ontwerpen en onderhouden van gegevensaanvoerketens met behulp van het FME-platform.
- Definiëren van regels voor gegevenstransformatie, -normalisatie en -consolidatie.
- Implementeren van connectoren en stromen die nodig zijn voor gegevensaanvoer en -distributie.
- Garanderen van de traceerbaarheid van gegevensuitwisselingen en naleving van architectuurstandaarden.
- Definiëren en automatiseren van Data Quality Management-regels.
- Implementeren van controles op formaat, volledigheid, temporele consistentie, uniciteit en kruisvalidatie.
- Gebruiken van FME en DataLift voor integratie-, transformatie- en kwaliteitscontroleactiviteiten.
- Ontwerpen van mechanismen voor het detecteren van duplicaten, uitschieters en inconsistenties tussen systemen of bronnen.
- Bijdragen aan de definitie van gegevenskwaliteitsindicatoren en monitoringdashboards.
- Opzetten van rapportagemechanismen om de evolutie van afwijkingen te volgen en corrigerende acties te prioriteren.
- Ontwikkelen van geautomatiseerde processen voor gegevensopschoning, -normalisatie, -deduplicatie, -verrijking en -correctie.
- Identificeren van de hoofdoorzaken van kwaliteitsproblemen en bijdragen aan hun oplossing bij de bron.
- Opzetten van een permanent systeem voor gegevenskwaliteitsmonitoring.
- Volgen van indicatoren voor nauwkeurigheid, volledigheid, consistentie, uniciteit, actualiteit en conformiteit.
- Deelnemen aan de oplossing van technische incidenten met betrekking tot gegevens.
- Documenteren van processen en tools om onderhoud en overdracht aan interne teams te vergemakkelijken.
- Technisch ondersteunen van de geleidelijke aansluiting van applicaties op het referentiepunt.
- Analyseren van de technische en functionele impact van verschillende aansluitingen.
- Bijdragen aan de definitie en uitvoering van functionele, technische en integratietestscenario's.
Profiel
We zoeken een ervaren Data Engineer met een gedegen ervaring in gegevensintegratie, ETL/ELT, modellering en gegevenskwaliteit.
Eisen
- Kennis van de principes van gegevensgovernance, met name referentiekaders zoals DAMA.
- Bevestigde ervaring met ETL-tools en tools voor gegevenskwaliteitsanalyse, met name FME en Talend.
- Beheersing van processen voor analyse en ontwerp van databasebeheersystemen.
- Bevestigde beheersing van Data Quality Management-processen, zowel theoretisch als praktisch.
- Goed begrip van mechanismen voor gegevensintegratie, ETL/ELT en uitwisselingen tussen systemen.
- Vermogen om regels voor kwaliteitscontrole en gegevensvalidatie te definiëren en te automatiseren.
- Vermogen om te werken aan projecten met meerdere gegevensbronnen en verschillende zakelijke en technische belanghebbenden.
Wensen
- Ervaring in gegevensmodellering en -conceptualisering.
- Ervaring met het opzetten van processen voor deduplicatie, normalisatie, consolidatie en gegevensopschoning.
- Ervaring met het ontwerpen van monitoring-, rapportage- en trackingmechanismen voor kwaliteitsindicatoren.
Hoe solliciteren?
Bekijk de volledige opdrachttekst en sollicitatie-informatie zodra je sollicitatie op maat klaarstaat.
Bestel een sollicitatie op maat om de volledige opdracht en sollicitatie-informatie te bekijken.
Meer context, minder losse zoekuren.
Je krijgt net genoeg context om te beoordelen of deze opdracht interessant is. De volledige briefing, klantdetails en vervolgstappen blijven beschikbaar in de app.