Job description
Data Engineer - Stream Processing F/H
Ref. Apec : 167395577W / Ref. Société : Data Engineer
- SENCROP
- 1CDI
- Lille - 59
Publiée le 04/01/2022
Actualisée le 04/01/2022
Postuler sur le site de l'entreprise
Salaire
A négocierPrise de poste
Dès que possibleExpérience
Minimum 3 ansMétier
Data scientistStatut du poste
Cadre du secteur privéZone de déplacement
Pas de déplacementSecteur d’activité du poste
PROGRAMMATION INFORMATIQUETélétravail
Partiel possibleDescriptif du poste
Chez Sencrop, notre objectif est de fournir des données de haute qualité pour aider les agriculteurs à prendre de meilleures décisions dans leurs activités quotidiennes.
Nous sommes le plus grand réseau de stations agro-météorologiques d'Europe, collectant, traitant et stockant des données en permanence. Découvrez notre application utilisée par plus de 20 000 agriculteurs, arboriculteurs et viticulteurs (cliquez ici : https://bit.ly/3qdQvzq ).
Nous recherchons un ingénieur expérimenté en traitement de données, pour améliorer et étendre nos capacités en matière de gestion des données météorologiques.
Votre mission principale sera de :
- Améliorer notre moteur de traitement des flux.
- Participer à l'évolution de l'architecture globale de traitement des données et du stockage.
- Améliorer la détection des anomalies et intégrer davantage d'algorithmes à cette fin.
- Intégrer de nouvelles fonctionnalités, apporter plus de sources de données.
- Viser des données de très haute qualité
- Améliorer la disponibilité des données pour tous les utilisateurs possibles
- Assurer l'évolutivité de notre architecture
- Travailler en étroite collaboration avec les Data Analyst et Product owners pour anticiper les nouveaux besoins en matière de données.
Notre stack technique actuelle :
- Apache Flink
- Apache Kafka, Kafka-connect
- Hadoop/EMR pour Flink
- Scala
- PostgreSQL
- Python
- Services AWS
- automatisation de terraform
Profil recherché
Vous êtes au bon endroit si :
- Vous avez une forte expérience avec un framework de traitement de données distribuées (spark, flink...).
- Vous maîtrisez Scala et Python.
- Expérience en qualité logicielle (tests automatisés...) dans un contexte de données volumineuses.
- Forte connaissance des architectures de données distribuées (débit vs latence, CAP, etc.)
- Forte attention portée à la qualité des données
- Expérience dans le déploiement de clusters de calcul (ex. Hadoop)
- Connaissance de l'automatisation des infrastructures
- Des connaissances en machine-learning sont un plus
Entreprise
Qui sommes nous ?
Chez Sencrop, notre métier est de construire des outils au service des agriculteurs.
Sencrop est une start-up agtech innovante qui déploie des solutions de capteurs agro-météo connectés en temps réel à une plateforme qui permet de rendre la donnée agro-environnementale accessible et collaborative. L’objectif de Sencrop est de proposer une solution basée sur la donnée pour permettre aux agriculteurs de mieux décider au quotidien et de bénéficier de conseils personnalisés et ultra-localisés.
Déjà plus de 20 000 agriculteurs, viticulteurs et arboriculteurs d’une dizaine de pays utilisent la plateforme digitale Sencrop.
Nous sommes soutenus par des acteurs importants du milieu agricole et connaissons une forte croissance: nous comptons aujourd'hui plus de 80 employés pour plusieurs milliers de clients et de capteurs connectés déployés dans plus de 10 pays.
Nos valeurs
- Personal responsibility – everyone contributes
- Customer-centricity – listen our customers
- Sharing – team spirit
- Creativity – innovation, test & learn
Notre impact
- Help farmers – Networked innovation to serve thousands of farmers
- Environment – A positive impact thanks to precision farming
Les avantages
- Des locaux flambants neufs à Lille au coeur d’Euratechnologies : campus qui regroupe entreprises tech, écoles & plusieurs milliers de salariés !
- Rôle clé dans une startup en pleine croissance
- Une intégration personnalisée
- Nos hobbies : nature, afterworks...
A savoir
- Contrat : CDI
- Localisation : Lille, Euratechnologies, at center of the European Tech
Processus de recrutement
Personne en charge du recrutement
Perrine GHESQUIÈRES - RRH
