Ingénieur Kafka
À propos de la mission. Une initiative stratégique d'intégration de données au sein d'un environnement industriel à grande échelle. L'objectif est de construire une nouvelle plateforme d'intégration événementielle qui deviendra la base de la future transformation numérique.
Il ne s'agit pas d'une mission de mise en œuvre à court terme, mais d'un partenariat à long terme visant à créer une capacité d'intégration évolutive, fiable et pérenne basée sur Apache Kafka, permettant une communication en temps réel entre différents systèmes opérationnels, applications et plateformes de données.
Ce que vous faites Vous jouerez un rôle clé dans la conception, la mise en œuvre et la préparation d'une plateforme Kafka de qualité production. Vous travaillerez en collaboration avec des architectes de solutions, des ingénieurs logiciels et des équipes opérationnelles pour définir comment le streaming d'événements doit être mis en œuvre, gouverné et maintenu.
Responsabilités.
- Concevoir et mettre en place des solutions de streaming d'événements basées sur Kafka
- Définir les standards et les meilleures pratiques de la plateforme Kafka
- Configurer et optimiser les topics, les partitions, la réplication, la rétention et les modèles de consommation
- Soutenir la gouvernance des schémas et la conception des contrats d'événements
- Implémenter les intégrations Kafka Connect et les flux de données
- Contribuer à la sécurité, au contrôle d'accès et au durcissement de la plateforme
- Mettre en place des processus de surveillance, d'observabilité et opérationnels
- Dépanner et optimiser les performances et la fiabilité de Kafka
- Transférer les connaissances aux équipes d'ingénierie et d'exploitation
- Aider à créer un modèle de plateforme durable
Profil
Ce rôle correspond généralement bien aux ingénieurs expérimentés ayant évolué à partir de l'intégration, des middlewares, de l'ingénierie de plateforme ou des architectures événementielles, et qui aiment prendre la responsabilité technique. Vous vous sentirez à l'aise dans des environnements où la disponibilité, l'évolutivité et la fiabilité opérationnelle sont essentielles, tels que:
- logistique et chaîne d'approvisionnement
- fabrication
- environnements industriels
- services publics
- télécommunications
- services financiers
- autres environnements d'entreprise 24h/24 et 7j/7
Ce qui est demandé
- Solide expérience pratique d'Apache Kafka dans des environnements de production
- Expérience de la conception, de la configuration et de la maintenance des plateformes Kafka
- Compréhension de l'architecture Kafka (brokers, topics, partitions, réplication, groupes de consommateurs, stratégies de rétention)
- Expérience avec Kafka Connect et les modèles d'intégration
- Expérience des principes de l'architecture événementielle
- Capacité à définir des standards opérationnels et des meilleures pratiques
- Expérience de la surveillance, du dépannage et de l'optimisation des performances
- Forte mentalité d'ingénieur avec un sens de la propriété
- Capacité à collaborer avec des architectes, des ingénieurs et des équipes opérationnelles
- Solides compétences en communication en anglais
Compétences souhaitées.
- Expérience Kubernetes
- Opérateur Strimzi Kafka
- Mode Kafka KRaft
- Implémentations de plateformes Kafka open source
- Concepts de registre de schémas (Karapace ou Confluent Schema Registry)
- Modèles d'intégration API
- Principes d'Infrastructure-as-Code
- Surveillance Prometheus / Grafana
- Concepts de sécurité (authentification, autorisation, certificats, gestion des ACL)
- Expérience d'intégration MQTT / IoT / OT
- Bonne compréhension du néerlandais
Ce à quoi ressemble le succès. Dans le cadre de ce parcours de plateforme à long terme, vous contribuez à créer et à faire évoluer une capacité de streaming d'événements pérenne:
- Une plateforme Kafka stable et évolutive devient la base de nouvelles intégrations et initiatives commerciales
- Les standards et les meilleures pratiques de Kafka évoluent continuellement avec la plateforme
- Les nouvelles intégrations sont livrées via des modèles réutilisables et durables
- La surveillance, la sécurité et l'excellence opérationnelle font partie de l'ADN de la plateforme
- Les équipes d'ingénierie collaborent autour d'une approche d'architecture événementielle partagée
- La plateforme continue de croître, de s'améliorer et de soutenir les futures initiatives de transformation numérique
Comment postuler
Consultez le texte complet de la mission et les informations de candidature des que votre candidature sur mesure est prete.
Commandez une candidature sur mesure pour consulter la mission complete et les informations de candidature.
Plus de contexte, moins d'heures de recherche dispersees.
Vous recevez juste assez de contexte pour evaluer si cette mission est interessante. Le briefing complet, les details client et les prochaines etapes restent disponibles dans l'app.