Data Engineer Python (Remoto) Pleno

Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa.

Desenvolvimento de Pipelines de Dados: Utilizando um design fornecido, implementar e manter pipelines de dados robustos e escaláveis para mover e transformar dados de diversas fontes para data warehouses ou outros sistemas de armazenamento.

Integração de Dados: Integrar e consolidar dados de diferentes fontes, garantindo consistência e precisão dos dados.

Gerenciamento de Banco de Dados: Administrar e otimizar bancos de dados utilizados para armazenamento e processamento de dados.

Transformação de Dados: Implementar processos de transformação de dados, incluindo limpeza, enriquecimento e agregação, para suportar necessidades analíticas e de relatórios multifuncionais.

Garantia de Qualidade de Dados: Implementar verificações e monitoramento de qualidade de dados para identificar e resolver prontamente problemas de qualidade.

Otimização de Desempenho: Otimizar pipelines de dados e bancos de dados para desempenho e escalabilidade.

Segurança e Conformidade: Garantir a segurança dos dados e conformidade com regulamentações de privacidade de dados, como GDPR, ou políticas internas, conforme aplicável.

Documentação: Manter documentação abrangente para pipelines de dados, processos, melhores práticas e configurações.

Colaboração: Colaborar com analistas de dados, analistas de negócios e parceiros multifuncionais para compreender suas necessidades de dados e fornecer as soluções de dados necessárias.

Monitoramento e Solução de Problemas: Monitorar proativamente pipelines de dados, identificar e solucionar problemas, e garantir alta disponibilidade dos sistemas de dados.

Sólido conhecimento através de experiência prática como Engenheiro de Dados ou em um cargo relacionado

Experiência comprovada em engenharia de dados ou cargo relacionado, com especialização em desenvolvimento de pipelines de dados e integração de dados

Experiência com processos e ferramentas ETL (Extract, Transform, Load)

Conhecimento sólido em sistemas de banco de dados, incluindo bancos de dados SQL e NoSQL

Experiência com sistemas ERP baseados em SAP e complementos (SAP S4 Hana, SAP BYD, SAP Analytics Cloud)

Familiaridade com conceitos e tecnologias de data warehousing

Compreensão dos requisitos de segurança de dados e conformidade

Experiência com modelagem de dados e princípios de arquitetura de dados

Excelentes habilidades de resolução de problemas e solução de questões

Habilidades fortes de comunicação e colaboração

Experiência com tecnologias de big data (por exemplo, Hadoop, Spark) é uma vantagem

Proficiência em linguagens de programação como Python, Java ou Scala é uma vantagem.

Habilidades Obrigatórias

• Python
• ETL
  
  

Habilidades Desejáveis

• SQL
• Spark
  
  

A vaga aceita trabalho remoto?

Sim