Experian

Engenheira(o) de Dados/Data Engineer

Job description

Descrição da empresa


SE É DESAFIADOR

É SERASA!


Somos formados por gente inquieta, inconformada, que acorda todos os dias para mudar a realidade do crédito no Brasil.

Corremos em um ritmo próprio e transformamos o impossível em mais um case de sucesso.

Como Engenheira(o) de Dados, aqui na Serasa, você será responsável pelo desenvolvimento de soluções confiáveis e escaláveis de dados com foco em processamento, armazenamento e disponibilização de grandes volumes de dados utilizando múltiplas plataformas.

Qual o nosso propósito?

Nós queremos revolucionar o acesso ao crédito no Brasil


  • Construir e manter os pipelines e serviços de dados;
  • Desenvolver, automatizar e melhorar rotinas ETL;
  • Desenvolver scripts/aplicações para coletar dados de diferentes fontes, inclusive da web;
  • Desenvolver scripts/aplicações para além da coleta dos dados melhorar eles e realizar agregações que melhore a performance do uso;
  • Disponibilizar Book de Variáveis processados e automatizados para que os times de IA e de Produtos possam desenvolver algoritmos surpreendentes;
  • Contribuir com o desenvolvimento e evolução de modelos e arquiteturas de dados para atender os requisitos técnicos e de negócios;
  • Realizar análises em bases de dados, com objetivos diversos;
  • Auxiliar os times de produtos na construção de um ambiente de dados propsio para ser disponibilizado no Lake House
  • Implementar sistemas e rotinas de monitoramento para assegurar a qualidade e a consistência das nossas bases de dados;
  • Contribuir com projetos dos times de IA no treinamento de modelos baseados em machine learning, incluindo o uso de técnicas de processamento de linguagem natural;
  • Participar de forma ativa em eventos e encontros frequentes, com o objetivo de compartilhar conhecimento;
  • Apoiar os integrantes do time na resolução de problemas e superação de obstáculos;

Descrição da vaga
  • Formação superior em Tecnologia da Informação, Ciência da Computação, Engenharia de Computação, Análise de Sistemas, Sistemas de Informação ou área relacionada;
  • Conhecimento sobre Big Data, com foco em processamento distribuído;
  • Conhecimento em modelagem de dados (relacional e dimensional);
  • Habilidade com a linguagem SQL;
  • Habilidade em desenvolvimento Python e pySpark;
  • Conhecimento sobre shell/bash script;
  • Habilidade com o sistema operacional Linux;
  • Conhecimento sobre virtualização;
  • Noções sobre o funcionamento e operação de SGBD relacionais (ex.: Oracle e PostgreSQL) e NoSQL (ex: MongoDB, Cassandra e Neo4J);
  • Experiencia trabalhando em EMR;
  • Noções sobre infraestrutura em cloud;
  • Habilidade em resolver problemas complexos, e que envolvem lógica;
  • Saber trabalhar em equipes horizontais e multidisciplinares;
  • Vivência em ambientes com processos ágeis (ex.: SCRUM e Kanban);
  • Habilidade no uso do sistema de versionamento de projetos GIT;

Qualificações


  • Habilidade com o Spark (pyspark), Nifi, Kafka e Solr;
  • Habilidade com Docker;
  • Será considerado um diferencial ter trabalhado com DataBricks;
  • Experiência com kubernetes;
  • Conhecimento sobre ferramentas de entrega contínua, principalmente GoCD;
  • Experiência no projeto, implementação e disponibilização de serviços REST;
  • Experiência com a stack de serviços e ferramentas da AW

Informações adicionais
  • Metas claras e muita autonomia para desenvolver estratégia e obter resultados
  • Produtos com a possibilidade de fazer história e deixar legado
  • Ferramentas de alta performance para trabalhar
  • Ambiente desafiador e High Performance
  • Times multidisciplinares e multiculturais
  • Horário Flexível
  • No dress code
  • Plano Médico e Odontológico (Para você e seu dependente )
  • Vale Alimentação + Refeição (Beneflex)
  • Seguro de Vida
  • PLR anual
  • Previdência privada
  • Gympass
  • Vale-Transporte

Please let the company know that you found this position on this Job Board as a way to support us, so we can keep posting cool jobs.