À propos de la mission. Pour une mission à long terme, une organisation recherche un ingénieur Big Data expérimenté. Vous rejoindrez un environnement de données techniquement stimulant où vous serez responsable de la réalisation, de l'intégration et de l'optimisation de flux de données à grande échelle. Vous travaillerez en étroite collaboration avec des data scientists et traduirez des questions analytiques complexes en solutions techniques concrètes et performantes.
Ce que vous faites
- Concevoir et développer des pipelines de données
- Effectuer le nettoyage, la préparation et l'intégration des données
- Travailler avec le traitement de données à grande échelle et Spark ETL
- Effectuer le wrangling, le joignage et l'agrégation de données
- Assurer l'orchestration des composants
- Contribuer aux architectures en temps réel et aux intégrations d'API
- Collaborer avec des data scientists pour traduire des modèles analytiques en solutions techniques
- Analyser et résoudre les problèmes de traitement et d'orchestration des données
Ce qu'ils demandent.
- Expérience dans un environnement Big Data moderne
- Connaissance de Hadoop, Pig & Hive
- Connaissance de Spark / PySpark
- Connaissance de Kafka & Confluent
- Connaissance d'Apache Airflow
- Connaissance de Python
- Connaissance de Java / JavaScript
- Connaissance de Docker & Kubernetes
- Expérience en développement d'API
- Connaissance des technologies de bases de données telles qu'Oracle, NoSQL, Graph et MongoDB
- Expérience avec GIT et CI/CD
- Expérience avec les architectures en temps réel
- L'expérience avec les environnements cloud tels qu'AWS ou Azure, AWS S3, la surveillance et la qualité des données, MLOps/LLMops et le développement front-end sont des atouts supplémentaires.
Profil
Vous êtes un ingénieur Big Data expérimenté qui aime travailler de manière pratique et traduire des problèmes de données complexes en solutions techniques évolutives. Vous travaillez de manière analytique et structurée, et vous êtes également fort en collaboration avec des data scientists et d'autres parties prenantes techniques.
Comment postuler
Consultez le texte complet de la mission et les informations de candidature des que votre candidature sur mesure est prete.
Commandez une candidature sur mesure pour consulter la mission complete et les informations de candidature.
Plus de contexte, moins d'heures de recherche dispersees.
Vous recevez juste assez de contexte pour evaluer si cette mission est interessante. Le briefing complet, les details client et les prochaines etapes restent disponibles dans l'app.