À propos de la mission. Vous travaillerez au sein d'une grande organisation. Vous rejoindrez une équipe qui déverrouille des données financières critiques provenant de sources internes et externes pour les opérations et à des fins d'analyse. L'équipe est en train de construire une nouvelle plateforme d'analyse entièrement dans Azure Databricks et gère également plusieurs grands entrepôts de données cloud.
Vous travaillerez en étroite collaboration avec les ingénieurs de données, les analystes et l'équipe de la plateforme.
Ce que vous ferez.
- Concevoir, développer et optimiser des pipelines de données au sein d'Azure Databricks
- Réaliser des processus d'ingestion, de transformation et d'enrichissement de données avec Python, PySpark et SQL
- Mettre en place et gérer des architectures de lakehouse selon l'architecture medallion
- Développer et maintenir des notebooks Databricks, des workflows et des structures Unity Catalog
- Implémenter des processus Infrastructure as Code et CI/CD au sein d'Azure DevOps
- Mettre en place et exécuter des tests unitaires, d'intégration et de régression
- Appliquer les meilleures pratiques d'ingénierie logicielle, y compris le contrôle de version, les revues de code, le linting et l'analyse de sécurité
- Collaborer avec les ingénieurs de données, les analystes et l'équipe de la plateforme pour réaliser des solutions de données de haute qualité
Profil
Vous combinez une connaissance approfondie d'Azure et de Databricks avec de solides principes d'ingénierie logicielle. Vous êtes proactif, structuré et précis, et vous avez un réel sens des données.
Ce qui est demandé
- Minimum 5 ans d'expérience professionnelle en ingénierie de données dans l'environnement Azure Cloud
- Minimum 5 ans d'expérience professionnelle avec Python et PySpark
- Minimum 5 ans d'expérience professionnelle avec SQL dans un environnement d'entreprise
- Minimum 3 ans d'expérience professionnelle avec les notebooks Databricks, les pipelines et Unity Catalog
- Minimum 3 ans d'expérience professionnelle avec Infrastructure as Code et les pipelines CI/CD Azure DevOps
- Minimum 2 ans d'expérience professionnelle avec les data lakehouses (par exemple, structure medallion)
- Expérience avérée en matière de tests (tests unitaires et de régression)
- Expérience avérée avec Git, le linting de code et l'analyse de code
- Niveau de réflexion et de travail HBO minimum (enseignement supérieur professionnel)
- Bonnes compétences écrites et orales en néerlandais
Souhaits.
- Expérience dans la conception et la construction de modèles dimensionnels
- Minimum 2 ans d'expérience avec Data Vault 2.0
- Minimum 3 ans d'expérience en ingénierie de données / BI dans le secteur financier
- Minimum 3 ans d'expérience avec Azure Data Factory
- Minimum 3 ans d'expérience avec Azure Synapse Analytics
- Certification Databricks (Data Engineer Associate ou Professional)
Comment postuler
Consultez le texte complet de la mission et les informations de candidature des que votre candidature sur mesure est prete.
Commandez une candidature sur mesure pour consulter la mission complete et les informations de candidature.
Plus de contexte, moins d'heures de recherche dispersees.
Vous recevez juste assez de contexte pour evaluer si cette mission est interessante. Le briefing complet, les details client et les prochaines etapes restent disponibles dans l'app.