Siamo alla ricerca di un Data Engineer da inserire nel nostro team Data Management, responsabile dello sviluppo di un'ampia gamma di prodotti di dati, dai sistemi scalabili di ingestione/elaborazione dei dati ai progetti di data lake e machine learning. Come parte del team Data & Analytics, i nostri data engineer lavorano in modo interfunzionale con il reparto IT, i data scientist e gli analyst per supportare gli stakeholder aziendali a guidare l'impatto attraverso un processo decisionale informato.
Responsabilità
• Costruire e implementare processi ETL/ELT e di manipolazione dei dati altamente efficienti e scalabili utilizzando tecnologie big data e cloud• Progettare e implementare il data lake per la reportistica e l'analisi self-services• Raccogliere i requisiti dalle parti interessate, compresi i data scientist e gli analisti aziendali• Impostare sistemi di monitoraggio della qualità dei dati che garantiscano che i dati raccolti abbiano la qualità e le caratteristiche richieste• Progettare pipeline CI/CD scalabili per distribuire in produzione prodotti di dati e soluzioni di intelligenza artificiale• Lavorare a stretto contatto con i partner in un ambiente collaborativo per realizzare casi d'uso analitici
Requisiti
• Minimo 3 anni di esperienza nel campo dell'ingegneria dei dati lavorando in un contesto agile• Esperienza di sviluppo con Python/Java. La conoscenza di Scala è un plus• Forte conoscenza del database SQL/NoSQL e delle tecniche di modellazione dei dati• Esperienza diretta con le tecnologie Cloud (ad es. Azure, AWS, Google)• Esperienza pregressa nella progettazione e implementazione di soluzioni MLOps e CI/CD• Esperienza con framework/metodologie ETL/ELT e orchestrazione• Esperienza con piattaforme di stream processing e event streaming (es. Kafka, Spark, Akka)• Nice to have: conoscenza della piattaforma Google Cloud, in particolare Bigquery, DataFlow, Apache Beam, Cloud Composer, Data catalog, Compute Engine, DataPrep
Sede: Milano (ibrido)
We offer:
Siamo alla ricerca di un Data Engineer da inserire nel nostro team Data Management, responsabile dello sviluppo di un'ampia gamma di prodotti di dati, dai sistemi scalabili di ingestione/elaborazione dei dati ai progetti di data lake e machine learning. Come parte del team Data & Analytics, i nostri data engineer lavorano in modo interfunzionale con il reparto IT, i data scientist e gli analyst per supportare gli stakeholder aziendali a guidare l'impatto attraverso un processo decisionale informato.
Responsabilità
• Costruire e implementare processi ETL/ELT e di manipolazione dei dati altamente efficienti e scalabili utilizzando tecnologie big data e cloud• Progettare e implementare il data lake per la reportistica e l'analisi self-services• Raccogliere i requisiti dalle parti interessate, compresi i data scientist e gli analisti aziendali• Impostare sistemi di monitoraggio della qualità dei dati che garantiscano che i dati raccolti abbiano la qualità e le caratteristiche richieste• Progettare pipeline CI/CD scalabili per distribuire in produzione prodotti di dati e soluzioni di intelligenza artificiale• Lavorare a stretto contatto con i partner in un ambiente collaborativo per realizzare casi d'uso analitici
Requisiti
• Minimo 3 anni di esperienza nel campo dell'ingegneria dei dati lavorando in un contesto agile• Esperienza di sviluppo con Python/Java. La conoscenza di Scala è un plus• Forte conoscenza del database SQL/NoSQL e delle tecniche di modellazione dei dati• Esperienza diretta con le tecnologie Cloud (ad es. Azure, AWS, Google)• Esperienza pregressa nella progettazione e implementazione di soluzioni MLOps e CI/CD• Esperienza con framework/metodologie ETL/ELT e orchestrazione• Esperienza con piattaforme di stream processing e event streaming (es. Kafka, Spark, Akka)• Nice to have: conoscenza della piattaforma Google Cloud, in particolare Bigquery, DataFlow, Apache Beam, Cloud Composer, Data catalog, Compute Engine, DataPrep
Sede: Milano (ibrido)