Data Engineer Sénior (Data Platform)
Job Description
Vous aurez comme objectif de concevoir, développer et maintenir des solutions de traitement de données à grande échelle au sein de la Plateforme Data, afin de soutenir les usages analytiques, opérationnels et temps réel dans une architecture data-centric..
Au sein des équipes Plateforme Data, le/la consultant(e) aura pour responsabilités :
- Conception, développement et maintenance de solutions de traitement de données à grande échelle
- Mise en œuvre de pipelines data batch et streaming
- Utilisation de technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark
- Collaboration étroite avec les équipes de développement et de production
- Garantie de la qualité, de la performance et de la robustesse des solutions déployées
Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d'une expérience significative équivalente
Expérience : Plus de 6 / 7 ans d’expérience confirmée en Scala / Java et Data Engineering.
Une expérience dans le retail ou la grande distribution est un plus.
Compétences requises :
Techniques :
- Scala et/ou Java
- Programmation fonctionnelle
- Apache Kafka / Kafka Streams
- Apache Spark
- BigQuery & SQL avancé
- GCP ou AWS (Cloud Storage, BigQuery, Dataproc, Kubernetes)
- CI/CD : GitLab CI/CD, Docker Compose
- Linux & ligne de commande
- Architecture microservices
- Tests unitaires et d’intégration
- Spring Boot
Méthodologies :
- DevOps
- Agile Scrum
Soft skills :
- Excellente communication écrite et orale
- Capacité à produire des livrables et reportings de qualité
- Esprit d’analyse et d’amélioration continue
- Capacité de prise de recul
- Esprit d’équipe et collaboration transverse
Looking forward to hearing from you !