Vous interviendrez en tant que Data Engineer dans le secteur de la distribution et serez intégré.e
Missions
à l’équipe en charge de l’intégration des données au sein de la plateforme Data sous le Cloud Azure.
Implémenter des solutions d’ingestion de données dans le cadre de cas d’usage
Délivrer des projets Data Lake / Big Data (pipeline de traitements de données, modélisation, tests, déploiements) dans un contexte de plus en plus DevOps
Assurer la collecte, la consolidation et la modélisation de gros volumes de données (Big Data, Data Warehouse, Data Lake)
Rédiger des documents projets (DATe, DEX,
)
Gérer l’évolution des solutions proposées, et possiblement en assurer la TMA
Optimiser les traitements, revoir les codes, diffuser les bonnes pratiques d’usage
Assurer la reprise d’historique et les tests de non-régression
Concevoir et mettre en uvre des flux en batch ou en streaming
Être capable de faire le lien avec les contraintes techniques (IT, sécurité, accès, outils) d’une DSI