Data Engineer AirFlow Remote

Un Peu De Contexte

Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! 🤖💪 Notre client souhaite améliorer l’opérabilité et les performances de ses services autour de la Data basés sur plusieurs plateformes IT : un datalake, un datamart, un datawarehouse, un environnement BI et Data Science. Ces plateformes, bien que matures et déjà opérées en production, nécessitent la mise en place d’outillage autour de problématiques d’orchestration afin de garantir la performance opérationnelle et la coordination requise par le niveau de service attendu par les métiers de notre client. En collaboration avec l’architecte data, les experts data et le gestionnaire/propriétaire produit, tu seras amené à participer aux opérations et à l’implémentation de la roadmap technique de la plateforme d’orchestration basé sur le produit Airflow.

Ainsi tu assureras le développement et le support expert des fonctionnalités de la plateforme en elle-même mais aussi de l’outillage DevOps autour du produit dont en priorité, l’observabilité, la gestion de la performance et l’amélioration continue du service Orchestration. Pour mettre à bien ce projet, tu interviendras en tant que consultant Data Engineer AirFlow. Tu seras en charge de :

• Participer aux initiatives d’audit des performances IT de la plateforme. 2.

Être force de proposition vis-à-vis des nouvelles fonctionnalités produit à mettre en place et des axes d’améliorations en accord avec le propriétaire produit.

• Participer aux ateliers de recueil de besoins d’utilisation de la plateforme avec l’ensemble des parties prenantes de l’écosystème Data : développement, métier, architecture, opérations IT.
• Assurer l’implémentation/développement de l’outillage et des fonctionnalités de la plateforme nécessaires avec accord de l’Architecte Data et les experts Data du groupe.
• Contribuer au développement des graphes orientés acycliques (DAG) nécessaires à la bonne opérabilité des plateformes datalake et datamart (AWS et Snowflake).
• Assurer le rôle de support technique auprès des end-users lors de leur usage de la plateforme.
• Assurer les livraisons et déploiement du code.
• Faire du support niveau 2, expertiser la production et participer aux situations de crises.
• Contribuer à la Knowledge Base du produit.
• Reporter au gestionnaire de la plateforme Airflow, les performances IT, l’état de santé temps réel et principaux risques opérationnels de la plateforme.
• Assurer le relais (Key User) auprès des équipes utilisatrices de la plateforme : BI, projets metiers, Data Science, DataLake, etc
• Participer aux points réguliers avec les utilisateurs afin d’échanger autour des bonnes pratiques d’usage et de développement.
• Produire la documentation nécessaire à ce passage de connaissance : tuto, document d’exploitation, etc
• Assurer et animer les sessions de transfert de connaissances au travers de démos produit.
• Accompagner les premiers développements de l’équipe de support.
• Aider l’équipe de support lors de la résolution d’incidents/problèmes.