ExitLag

Data Engineer

Job description

Descrição

  • Desenvolver e manter pipelines de dados: Construir e manter sistemas de pipeline de dados robustos e eficientes para coleta, armazenamento e análise de grandes conjuntos de dados.
  • Experiência com Airflow, Clickhouse, S3 são valorizados
  • Otimização do Armazenamento de Dados: Implementar soluções para armazenamento de dados que sejam escaláveis e otimizadas para consultas rápidas.
  • Conhecer sobre modelagem de dados, separação em camadas de acesso, segurança, otimização de query;
  • Garantia de Qualidade de Dados: Assegurar a integridade e a precisão dos dados através de práticas de limpeza, deduplicação e verificação.
  • Colaboração com Equipes de Ciência de Dados e BI: Trabalhar em estreita colaboração com cientistas de dados e analistas de BI para garantir que os dados estejam prontos e acessíveis para análises avançadas.
  • Gestão de Infraestrutura de Dados: Gerenciar e otimizar infraestruturas de dados, incluindo bancos de dados, data warehouses e data lakes.
  • Monitorar o fluxo de dados
  • Implementação de Políticas de Segurança de Dados: Aplicar medidas de segurança para proteger os dados contra acessos não autorizados e violações de segurança.

Requisitos

Habilidades e Qualificações Necessárias:

  • Graduação em Ciência da Computação, Engenharia, ou áreas relacionadas.
  • Proficiência em linguagens de programação como Python, SQL; Machine Learning é um plus;
  • Conhecimento em bancos de dados SQL colunar (não relacional);
  • Familiaridade com técnicas de processamento de dados e ETL.
  • Boas habilidades de comunicação e colaboração em equipe.
  • Capacidade de resolver problemas complexos e realizar análises detalhadas.

Habilidades e Qualificações Desejáveis

  • Experiência com ferramentas de big data como Hadoop, Spark, Kafka, pySpark.
  • NoSQL (MongoDB) e dados não estruturados;
  • Experiência com ferramentas de ELT e data/process mining (Orange, DBT, Alteryx, Talend, Kettle, etc..)

Benefícios

  • Após 12 meses de contrato ativo, a ExitLag oferece PTO (paid time off) de 30 dias;
  • Bônus anual baseado na remuneração mensal, proporcional aos meses de serviços prestados;
  • Parceria com a plataforma Zenklub;
  • Subsídio Educacional após 6 meses;
  • Opção de Stock Options após 12 meses;

Please let the company know that you found this position on this Job Board as a way to support us, so we can keep posting cool jobs.

Similar jobs

Browse All Jobs
Complexio
July 27, 2024

Data Engineer

Costco Wholesale
July 27, 2024

Intermediate Data Engineer