Data Engineer GCP / BigQuery / Terraform - Lille

🎯 Contexte de la mission

Dans le cadre de l'évolution de son architecture data, l'entreprise souhaite refondre et automatiser sa plateforme de données sur Google Cloud Platform (GCP), avec un focus particulier sur BigQuery. L'objectif principal est de disposer d'une infrastructure fiable, automatisée, scalable et optimisée en coûts.

🚀 Objectifs de la mission

Phase 1 : Modernisation de l'architecture

• Refonte de l'architecture existante sur BigQuery.

• Déploiement automatisé des ressources via Terraform (Infrastructure as Code).

• Mise en place de pipelines de transformation avec dbt.

• Standardisation de la création des assets data (datasets, modèles, vues) pour garantir scalabilité et réplicabilité.

Phase 2 : Mise en œuvre de la Data Quality

• Intégration de dbt-elementary pour le suivi de la qualité des données.

• Définition de règles de validation et de tests automatisés sur les jeux de données critiques.

• Potentielle intégration avec la Data Quality Platform interne.

Phase 3 : Suivi FinOps

• Conception d'un dashboard FinOps pour piloter les coûts (requêtes, stockage…).

• Mise en place d'un alerting et diffusion de bonnes pratiques d'optimisation budgétaire.

🔍 Profil recherché

• Minimum 3 ans d'expérience en tant que Data Engineer dans un environnement cloud GCP.

• Excellente maîtrise de :

  • GCP / BigQuery

  • Terraform

  • dbt

  • SQL

• Expérience en tests de données et en monitoring qualité (dbt tests, dbt-elementary).

• La maîtrise de Power BI ou Looker est un plus.

• Compétences clés : autonomie, rigueur, capacité à documenter, et collaboration transverse avec les équipes Data, IT et Finance.

Montreal Associates is acting as an Employment Business in relation to this vacancy.