Data Engineer Senior

Data Engineer Senior

SAO PAULO, Brazil

WHAT YOU WILL BE DOING

FUNÇÃO:

Especialista em programação em nível de produção, sistemas distribuídos, transformação de dados, análise de dados e pipelines de dados

RESPONSABILIDADES:

• Criação de algoritmos para ajudar a facilitar o acesso aos dados brutos.
• Entender como otimizar a recuperação de dados e como desenvolver dashboards, relatórios e outras visualizações para as partes interessadas.
• Definir a estrutura dos dados para consumo e visualização dos dados.
• Estruturação e desenvolvimento de esquemas de tabelas para Data Lake, Data Warehouse, Ambientes Distribuídos.
• Segurança e alta disponibilidade de dados.
• Atento a tendências ou inconsistências que afetarão as metas de negócios.
• Desenvolver, construir, testar e manter arquiteturas de dados.
• Alinhar arquiteturas com requisitos de negócios.
• Cuidar da aquisição dos dados.
• Desenvolver processos de conjunto de dados.
• Identificar maneiras de melhorar a confiabilidade, a eficiência e a qualidade dos dados.
• Preparar dados para modelagem preditiva e prescritiva.

PRÉ REQUISITOS:

• Ter perfil desbravador, hands-on.
• Valoriza um ambiente dinâmico e aprende rápido com mudanças de contexto.
• Experiência com ciência de dados/machine learning.
• Experiências em estruturação e desenvolvimento de esquemas de tabelas para Data Lake, Data Warehouse, Ambientes Distribuídos.
• Domínio de linguagens Python, R, Scala, Pyspark e suas respectivas bibliotecas para ciência/análise de dados.
• Domínio de SQL, NoSQL, Cassandra, Hbase, Scylladb, Spark.
• Conhecimento em Cloud.
• Inglês avançado/fluente para comunicação (reading, listening and speaking).
• Graduação completa em Ciência da Computação, Engenharia ou área técnica relacionada.
• Pós graduação em Ciência de Dados, Engenharia de Dados, Análise Avançada de Dados e afins.

GRANDES DIFERENCIAIS:

• Implantar e dar sustentação as soluções relacionadas a infraestrutura de dados (bancos de dados relacionais, não relacionais, etc) e Big Data.
• Papel consultivo de auxílio com relação à análise de dados/ferramentas, levantando os requisitos de acordo com a área do negócio.
• Sintetizar as informações em bases de dados através de inclusões, alterações e exclusões de tabelas.
• Criação de views e procedures para a construção de dashboards em Tableau, Power BI e/ou Quick Sense e aplicações internas.
• Desenvolver ETLs (Extract Transform Load) e APIs para extração de dados de fontes internas e/ou externas.
• Revisar e criar melhorias de automações dos processos internos.
• Compreensão de design para segurança, escalabilidade, desempenho e disponibilidade.
• Certificações em Inteligência Artificial e/ou Machine Learning.
• Capacidade de trabalhar em ambiente de desenvolvimento ágil e rápido.
• Paixão por desenvolver estrutura de dados que tragam rápida tomada de decisão.

WHAT WE ARE LOOKING FOR

EXPERIENCE

EDUCATION

Superior Completo

COMPETENCIES

Actively Collaborate (Strength), Brings Passion (Strength), Delivers Results (Strength), Embrace Change (Strength), Keep Promises (Strength), Show Respect (Strength), Supports People (Strength), Talk Straight (Strength), Truly Listen (Strength)