Job description
Siamo alla ricerca di un Data Engineer da inserire nel nostro team Data Management, responsabile dello sviluppo di un'ampia gamma di prodotti di dati, dai sistemi scalabili di ingestione/elaborazione dei dati ai progetti di data lake e machine learning. Come parte del team Data & Analytics, i nostri data engineer lavorano in modo interfunzionale con il reparto IT, i data scientist e gli analyst per supportare gli stakeholder aziendali a guidare l'impatto attraverso un processo decisionale informato.
Responsabilità
• Costruire e implementare processi ETL/ELT e di manipolazione dei dati altamente efficienti e scalabili utilizzando tecnologie big data e cloud• Progettare e implementare il data lake per la reportistica e l'analisi self-services• Raccogliere i requisiti dalle parti interessate, compresi i data scientist e gli analisti aziendali• Impostare sistemi di monitoraggio della qualità dei dati che garantiscano che i dati raccolti abbiano la qualità e le caratteristiche richieste• Progettare pipeline CI/CD scalabili per distribuire in produzione prodotti di dati e soluzioni di intelligenza artificiale• Lavorare a stretto contatto con i partner in un ambiente collaborativo per realizzare casi d'uso analitici
Requisiti
• Minimo 3 anni di esperienza nel campo dell'ingegneria dei dati lavorando in un contesto agile• Esperienza di sviluppo con Python/Java. La conoscenza di Scala è un plus• Forte conoscenza del database SQL/NoSQL e delle tecniche di modellazione dei dati• Esperienza diretta con le tecnologie Cloud (ad es. Azure, AWS, Google)• Esperienza pregressa nella progettazione e implementazione di soluzioni MLOps e CI/CD• Esperienza con framework/metodologie ETL/ELT e orchestrazione• Esperienza con piattaforme di stream processing e event streaming (es. Kafka, Spark, Akka)• Nice to have: conoscenza della piattaforma Google Cloud, in particolare Bigquery, DataFlow, Apache Beam, Cloud Composer, Data catalog, Compute Engine, DataPrep
Sede: Milano (ibrido)
We offer:
Siamo alla ricerca di un Data Engineer da inserire nel nostro team Data Management, responsabile dello sviluppo di un'ampia gamma di prodotti di dati, dai sistemi scalabili di ingestione/elaborazione dei dati ai progetti di data lake e machine learning. Come parte del team Data & Analytics, i nostri data engineer lavorano in modo interfunzionale con il reparto IT, i data scientist e gli analyst per supportare gli stakeholder aziendali a guidare l'impatto attraverso un processo decisionale informato.
Responsabilità
• Costruire e implementare processi ETL/ELT e di manipolazione dei dati altamente efficienti e scalabili utilizzando tecnologie big data e cloud• Progettare e implementare il data lake per la reportistica e l'analisi self-services• Raccogliere i requisiti dalle parti interessate, compresi i data scientist e gli analisti aziendali• Impostare sistemi di monitoraggio della qualità dei dati che garantiscano che i dati raccolti abbiano la qualità e le caratteristiche richieste• Progettare pipeline CI/CD scalabili per distribuire in produzione prodotti di dati e soluzioni di intelligenza artificiale• Lavorare a stretto contatto con i partner in un ambiente collaborativo per realizzare casi d'uso analitici
Requisiti
• Minimo 3 anni di esperienza nel campo dell'ingegneria dei dati lavorando in un contesto agile• Esperienza di sviluppo con Python/Java. La conoscenza di Scala è un plus• Forte conoscenza del database SQL/NoSQL e delle tecniche di modellazione dei dati• Esperienza diretta con le tecnologie Cloud (ad es. Azure, AWS, Google)• Esperienza pregressa nella progettazione e implementazione di soluzioni MLOps e CI/CD• Esperienza con framework/metodologie ETL/ELT e orchestrazione• Esperienza con piattaforme di stream processing e event streaming (es. Kafka, Spark, Akka)• Nice to have: conoscenza della piattaforma Google Cloud, in particolare Bigquery, DataFlow, Apache Beam, Cloud Composer, Data catalog, Compute Engine, DataPrep
Sede: Milano (ibrido)
Similar jobs
Browse All Jobs
