Data Engineer | Senior

Responsabilidades e atribuições

• Desenvolver e otimizar pipelines de dados para ingestão, transformação e carga (ETL) de dados em ambientes distribu��dos e em tempo real;
• Criar sistemas para coletar e armazenar dados;
• Construir processos de agregação e transformação de dados para fins analíticos.
  
  
  

Requisitos e qualificações

• Experiência com a tecnologia Elasticsearch, File System Crawler, Pipeline Logstash e armazenamento NoSQL;
• Sólida experiencia com linguagem JAVA e biblioteca Apache Tika em contexto de engenharia de dados;
• Git;
• Geração de scripts;
• Experiência com leitura, processamento e manipulação de dados em arquivos, stored procedures, banco de dados Oracle/SQLServer;
• Habilidades no desenvolvimento de processos ETL e workflows;
• Desejável: Experiência com linguagem Python em contexto de engenharia de dados.
  
  
  

Não possui todos os requisitos para a vaga?

Está tudo bem! Na Compass UOL, estimulamos o desenvolvimento contínuo de novos talentos e transformamos desafios em oportunidades.

Informações adicionais

#remote

remote