Data Engineer GCP (H/F) / Freelance

Company:
Location: Paris (75)

*** Mention DataYoshi when applying ***

Poste : Data Engineer GCP Missions : - Créer et maintenir une architecture optimale de pipeline de données, tout en automatisant les processus manuels, en optimisant la livraison des données, en re-concevant l'infrastructure pour une plus grande évolutivité, etc. - Assembler de grands ensembles de données complexes qui répondent aux exigences fonctionnelles/ non fonctionnelles de l'entreprise. - Construire l'infrastructure nécessaire pour l'extraction optimale, la transformation et le chargement des données à partir d'une grande variété de sources de données en utilisant sql et GCP Big Data technologies. - Créer des outils d'analyse qui utilisent le pipeline de données pour fournir des informations exploitables sur l'acquisition de clients, l'efficacité opérationnelle et d'autres paramètres clés de performance de l'entreprise.

  • Travailler avec des experts en données et en analyse pour s'efforcer d'obtenir une plus grande fonctionnalité dans les systèmes de données. Environnement technique : Auteur, requête et optimisation des coûts SQL principalement sur BigQuery. Pipeline de données, outils de streaming de données et de gestion des flux de travail : DataFlow, PubSub, Hadoop, spark-streaming... Python comme langage de script orienté objet.
Système de contrôle de version: GIT. Connaissance préférable de l'infrastructure comme code: Terraform. Profil recherché : - Connaissances et expérience avancées en matière de TRAVAIL SQL travaillant avec des bases de données relationnelles, la rédaction de requêtes (SQL) ainsi que la familiarité de travail avec une variété de bases de données. - Découvrez la construction et l'optimisation de pipelines de données, d'architectures et d'ensembles de données.

  • Expérience de l'analyse des causes profondes sur les données et les processus internes et externes pour répondre à des questions commerciales spécifiques. - Créer des processus de transformation des données, de structures de données, de métadonnées, de dépendance et de gestion de la charge de travail. - Connaissance de travail de la file d'offres de messages, du traitement des flux et des magasins de données hautement évolutifs. - Expérience de soutien et de travail avec des équipes interfonctionnelles dans un environnement dynamique.

*** Mention DataYoshi when applying ***

Offers you may like...

  • ButterflyMX

    Data Engineer
    Remote
  • Braintrust

    Sr. Data Engineer (no C2C)
    San Francisco, CA 94147
  • ReUp Education

    Data Engineer (Remote)
    San Francisco, CA
  • Exact Sciences Corporation

    Sr Biomedical Data Engineer
    Redwood City, CA 94063
  • Cigna

    BI Data Engineer-Work from home-eviCore
    Franklin, TN