Data Engineer

Company:
Location: Madrid, Madrid provincia

*** Mention DataYoshi when applying ***

Job Opening ID
1125

Project lenght in months
Largo Plazo

Languages
Español, Ingles

Knowledge area

Skills
Big Data

Rate - Eur
240-260

Job Description

Data Enginner

Seleecionamos Data Enginner para participar en proyecto de fabricante de software Big Data líder en su sector.

Tareas:

  • Diseñar, desarrollar y depurar procesos y scripts en SCALA & SPARK Streaming para la ingesta de fuentes de datos de forma automatizada y para realizar los cálculos requeridos.
  • Deseable conocimiento en desarrollo de aplicativos Web (
  • Conocimientos de las siguientes herramientas: GitLab, JIRA, Nexus, Jenkins, Confluence,
  • Diseña y desarrolla código, scripts, flujos de datos, e instalación de software.
  • Identifica e ingesta nuevas fuentes de datos en la plataforma de Big Data
  • Integración nuevas fuentes de información
  • Generación de documentación asociada a los interfaces desarrollados
    Soporte en posibles procesos de tratamiento y réplica de datos
  • Debe tener conocimientos técnicos específicos y experiencia práctica de al menos un año trabajando en un entorno Hadoop (Cloudera), incluyendo los sistemas operativos, file systems y las herramientas correspondientes

Conocimientos:

  • +1 año de experiencia en Diseño y Desarrollo de procesos en entornos Big Data en particular con SCALA y SPARK (Cloudera).
  • Experiencia en entornos Hadoop, Spark, SCALA, Kafka, Hive, Java, Impala, Flume y otras herramientas del ecosistema Cloudera.
  • Conocimientos en servicios de administración y operación
  • Buen conocimiento de Unix y habilidades SQL y scripting y programación.
  • Conocimientos en herramientas de integración tecnológicas como herramientas de automatización, control de procesos, despliegue y planificación (Git , Jenkins, Nexus, JIRA, Confluence).
  • Deseable - Conocimientos de Arquitectura de sistemas
  • Deseable - Conocimientos en bases de datos tanto NoSql como relacionales (Oracle).
  • Deseable - Conocimiento de herramientas de Modelado de Datos (ERWIN o similar)
  • Deseable - Conocimiento de herramientas ETL y BI
  • Nivel medio de inglés para interactuar con otros equipos de manera verbal y escrita

Ofrecemos:

  • Contrato modalidad freelance
  • Tarifa: 220-260 eur/jornada dependiendo experiencia
  • Recurrencia en proyectos
  • Buen ambiente de trabajo
  • Grandes posibilidades de proyección profesional

*** Mention DataYoshi when applying ***

Offers you may like...

  • UnitedHealth Group

    Senior Data Engineer Data Quality Analyst - Teleco...
    Eden Prairie, MN 55346
  • Business Mentors

    Senior Data Engineer FT
    Remote
  • umlaut North America

    Staff Data Engineer
    Remote
  • Recruiting for Good

    Remote Data Engineer with Cool Automotive Company
    Los Angeles, CA
  • XO

    Data Engineer
    Brisbane, CA 94005