Data Engineer

Data Enginner

• 
  Diseñar, desarrollar y depurar procesos y scripts en SCALA & SPARK Streaming para la ingesta de fuentes de datos de forma automatizada y para realizar los cálculos requeridos.
  
• Deseable conocimiento en desarrollo de aplicativos Web (
  
• Conocimientos de las siguientes herramientas: GitLab, JIRA, Nexus, Jenkins, Confluence,
  
• Diseña y desarrolla código, scripts, flujos de datos, e instalación de software.
  
• Identifica e ingesta nuevas fuentes de datos en la plataforma de Big Data
  
• Integración nuevas fuentes de información
  
• Generación de documentación asociada a los interfaces desarrollados
  Soporte en posibles procesos de tratamiento y réplica de datos
  
• Debe tener conocimientos técnicos específicos y experiencia práctica de al menos un año trabajando en un entorno Hadoop (Cloudera), incluyendo los sistemas operativos, file systems y las herramientas correspondientes

• 
  +1 año de experiencia en Diseño y Desarrollo de procesos en entornos Big Data en particular con SCALA y SPARK (Cloudera).
  
• Experiencia en entornos Hadoop, Spark, SCALA, Kafka, Hive, Java, Impala, Flume y otras herramientas del ecosistema Cloudera.
  
• Conocimientos en servicios de administración y operación
  
• Buen conocimiento de Unix y habilidades SQL y scripting y programación.
  
• Conocimientos en herramientas de integración tecnológicas como herramientas de automatización, control de procesos, despliegue y planificación (Git , Jenkins, Nexus, JIRA, Confluence).
  
• Deseable - Conocimientos de Arquitectura de sistemas
  
• Deseable - Conocimientos en bases de datos tanto NoSql como relacionales (Oracle).
  
• Deseable - Conocimiento de herramientas de Modelado de Datos (ERWIN o similar)
  
• Deseable - Conocimiento de herramientas ETL y BI
  
• Nivel medio de inglés para interactuar con otros equipos de manera verbal y escrita