Data Engineer
Job Description
Au sein de l’équipe Data, vous intervenez sur la conception, le développement et l’industrialisation de pipelines de données batch et temps réel.
Vous contribuez à la mise en place d’architectures data modernes sur GCP ainsi qu’au développement de flux streaming robustes basés sur Kafka et l’écosystème Java.
🔹Data Warehouse & BigQuery
- Concevoir et maintenir des datasets dans BigQuery
- Développer des requêtes SQL optimisées (partitionnement, clustering)
- Mettre en place des stratégies d’optimisation des coûts et performances
- Concevoir des modèles analytiques (schéma en étoile, data marts)
- Garantir la qualité et la cohérence des données
🔹Concevoir et développer des pipelines ELT/ETL (batch & streaming)
- Modéliser les données (modèles analytiques, data warehouse)
- Optimiser les requêtes et la performance des traitements
- Mettre en place des flux temps réel via Kafka / PubSub
- Participer à la définition des architectures data (scalabilité, résilience)
🔹 Développement & Streaming
- Développer des services et APIs en Java (Spring Boot) et/ou Scala
- Implémenter des traitements streaming avec Kafka / Kafka Streams
- Développer et maintenir les transformations via DBT (Data Build Tool)
- Contribuer aux architectures microservices orientées data
🔹 Industrialisation & Exploitation
- Orchestrer les workflows avec Airflow / Cloud Composer
- Automatiser les déploiements via CI/CD (GitLab CI)
- Assurer le versioning avec Git
🔹 Excellente communication écrite et orale : Aptitude à produire des livrables et des reportings
de haute qualité.
🔹Capacité de prise de recul : Aptitude à évaluer les problématiques avec objectivité et à
proposer des solutions d'amélioration.
🔹Esprit d'équipe : Capacité à collaborer efficacement avec les membres de l'équipe po
atteindre des objectifs communs.
🔹Maîtrise des concepts d’Agilité (Scrum, Sprint Planning, Backlog...).
🔹Capacité à s'adapter rapidement aux nouvelles technologies et aux changements de priorités.
● Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation
en informatique, ou justifiant d'une expérience significative équivalent
● Expérience de 4 ans et plus en GCP