Data Engineer / Développeur·euse Big Data F/H

Company:
Location: Nantes (44)

*** Mention DataYoshi when applying ***

Un·e data engineer est en charge de concevoir et de construire des pipelines de traitement de données. Curieux·se, il / elle est à l’aise avec du batch et du temps réel, de l’on premise et du cloud, des datalakes ou des data warehouses modernes. Ses traitements sont robustes, sécurisés, et performants, et il / elle n’hésite pas à les factoriser et les automatiser.

Vos missions seront les suivantes :

  • Étudier les systèmes sources ;

  • Choisir et implémenter les solutions de stockage et les modèles de données adéquats ;

  • Extraire et charger les données des systèmes sources ;

  • Uniformiser, structurer et transformer les données ;

  • Exposer ces données (API, Web services …) ;

  • Planifier et orchestrer ces traitements ;

  • Industrialiser selon les pratiques CI/CD ;

  • Mettre en place des solutions de monitoring ;

  • Documenter le code ;

  • Expérimenter, évaluer, faire de la veille technologique.

Qualifications

Vous êtes diplômé·e d'une Grande École d'Ingénieur généraliste, informatique ou d’un Master spécialisé en Big Data, et avez une expérience minimum de 3 ans dans ce domaine.

Vous maitrisez une ou plusieurs des solutions suivantes :

  • L’écosystème Hadoop : Spark, HDFS, Hive, HBase, …

  • Les distributions Cloudera (Hortonworks), MapR

  • SQL, Scala, Java, Python, …

  • Les services Data des principaux fournisseurs Cloud (AWS, Azure, GCP, …)

  • Airflow, Luigi, …

  • Kafka, RabbitMQ, …

  • ElasticSearch (et la Suite ELK), Cassandra, MongoDB, Neo4J, …

  • Docker, Kubernetes …

Vous avez une ou plusieurs certifications en cours de validité sur l’une des technologies citées ci-dessus,

Vous disposez d’un très bon relationnel, d’un bon sens de l’écoute et d’empathie,

Vous faites preuve d’initiative, vous êtes naturellement force de propositions, vous avez envie de partager tes connaissances et savoir-faire et d’apprendre de vos pairs.

*** Mention DataYoshi when applying ***

Offers you may like...

  • Myticas Consulting

    BHJOB15656_16490 - Senior Data Engineer
    Remote
  • MarketDial

    Data Engineer
    Salt Lake City, UT 84101
  • Applied Research Associates, Inc

    Senior Data Engineer
    Fort Belvoir, VA 22060
  • PBT Group

    Cloud Data Engineer
    Johannesburg, Gauteng
  • PBT Group

    Data Engineer
    Johannesburg, Gauteng