Desenvolver e manter pipelines de dados: Construir e manter sistemas de pipeline de dados robustos e eficientes para coleta, armazenamento e análise de grandes conjuntos de dados.
Experiência com Airflow, Clickhouse, S3 são valorizados
Otimização do Armazenamento de Dados: Implementar soluções para armazenamento de dados que sejam escaláveis e otimizadas para consultas rápidas.
Conhecer sobre modelagem de dados, separação em camadas de acesso, segurança, otimização de query;
Garantia de Qualidade de Dados: Assegurar a integridade e a precisão dos dados através de práticas de limpeza, deduplicação e verificação.
Colaboração com Equipes de Ciência de Dados e BI: Trabalhar em estreita colaboração com cientistas de dados e analistas de BI para garantir que os dados estejam prontos e acessíveis para análises avançadas.
Gestão de Infraestrutura de Dados: Gerenciar e otimizar infraestruturas de dados, incluindo bancos de dados, data warehouses e data lakes.
Monitorar o fluxo de dados
Implementação de Políticas de Segurança de Dados: Aplicar medidas de segurança para proteger os dados contra acessos não autorizados e violações de segurança.
Requisitos
Habilidades e Qualificações Necessárias:
Graduação em Ciência da Computação, Engenharia, ou áreas relacionadas.
Proficiência em linguagens de programação como Python, SQL; Machine Learning é um plus;
Conhecimento em bancos de dados SQL colunar (não relacional);
Familiaridade com técnicas de processamento de dados e ETL.
Boas habilidades de comunicação e colaboração em equipe.
Capacidade de resolver problemas complexos e realizar análises detalhadas.
Habilidades e Qualificações Desejáveis
Experiência com ferramentas de big data como Hadoop, Spark, Kafka, pySpark.
NoSQL (MongoDB) e dados não estruturados;
Experiência com ferramentas de ELT e data/process mining (Orange, DBT, Alteryx, Talend, Kettle, etc..)
Benefícios
Após 12 meses de contrato ativo, a ExitLag oferece PTO (paid time off) de 30 dias;
Bônus anual baseado na remuneração mensal, proporcional aos meses de serviços prestados;