Data Engineer H/F

Notre client est un acteur majeur du commerce de proximité. Dans un contexte de transformation digitale important, il a mis en place depuis quelques années une méthodologie d'agilité à l'échelle (SAFe) afin d'améliorer ses produits et de créer des offres toujours plus innovantes.

Missions

• Contribuer à la création du produit DataHub,
• Contribuer à l'optimisation des pipelines de traitement des données et à l'enrichissement d'un référentiel de données en intégrant de nouvelles sources de données de nos partenaires internationaux,
• Faire évoluer les pipelines de données existants,
• Intégrer de nouvelles sources de données,
• Évaluer la qualité des données,
• Analyser et résoudre les incidents de production,
• Concevoir des tableaux de bord pour le suivi des applications,
• Améliorer les pipelines CI/CD,
• Optimiser les performances des pipelines de données et en assurer le déploiement en production.
• Bac +5 minimum en école d'Ingénieur ou université avec une expérience significative d'au moins 3 ans à un poste similaire,
• Maîtrise de Spark/Scala,
• Expérience avec AWS,
• Compétences avancées en SQL,
• Connaissance de Postgresql,
• Utilisation de Git,
• Capacité à gérer à plusieurs projets de développement en mode agile (Scrum, Safe, Kanban, etc.) ; capacité à travailler en équipe et à communiquer avec chaque membre (partage et développement de connaissances).
  
  

Les Plus

• Connaissance de Java et d'ElasticSearch/Kibana,
• Familier avec Kafka et Zio,
• Expérience avec RestAPI,
• Utilisation de GitlabCI et de Liquibase.