Data Engineer GCP (Pub/Sub, DBT)
Job Description
Le/la consultant(e) aura pour responsabilités :
- Développement et maintenance des pipelines de transformation de données avec DBT.
- Manipulation et traitement de gros volumes de données via BigQuery et SQL avancé.
- Gestion des flux de données et intégration avec Pub/Sub.
- Automatisation des workflows data via GitLab CI/CD et Docker Compose.
- Développement de traitements batch pour l’alimentation et l’export des flux de données.
- Mise en production des IHM génériques via inserts SQL.
- Développement de scripts Shell Bash dans un environnement Linux.
- Utilisation du framework interne Carrefour (Génépi).
- Collaboration avec l’équipe Flux dans un environnement Agile.
Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d'une expérience significative équivalente.
Expérience : +7 ans en Data Engineering.
Compétences requises :
- DBT, SQL avancé, BigQuery, GCP, Pub/Sub, GitLab CI/CD, Docker Compose, PostgreSQL, Linux, Shell Bash, Git, Vim, Agile Scrum.
Looking forward to hearing from you !