Rôle : Data Engineer Senior Databricks / GCP
TJM : 430 ? / jour
Localisation : Meudon (3 jours par semaine sur site / 2 jours de télétravail)
Date de début : ASAP
Durée de la mission : Jusqu'au 31/12/2026
Contexte de la missionAu sein d'une équipe pluridisciplinaire (chefs de projet, architectes, DevOps, Data Engineers), vous interviendrez sur la conception et le développement de projets d'intégration de données à forte valeur ajoutée.
Vos principales responsabilités incluent :
Développement de jobs d'intégration de données en PySpark, Spark et Python (modes streaming et batch) sur la plateforme Databricks.
Mise en ?uvre du CI/CD (GitHub, DevOps, Databricks Asset Bundles), de l?orchestration, du data management et de la sécurité.
Optimisation des jobs existants et des ressources Cloud (GCP et Databricks).
Mise en place de Dashboards FinOps afin de suivre et piloter l'usage des ressources GCP / Databricks.
Participation aux astreintes et au support en production de l'application.
Assurer une formation continue, le partage de connaissances et la rédaction de la documentation technique.
Compétences clés requisesDatabricks : Excellente maîtrise de l'administration, de la gestion des catalogues (Unity Catalog), de Delta Lake et de l'optimisation des performances.
Technologies Data : Maîtrise approfondie de PySpark, Spark, Python, SQL et GIT.
Cloud (GCP) : Bonne connaissance de l'écosystème Google Cloud Platform, notamment GCS, Pub/Sub, GKE et les outils d'Alerting.
Qualités professionnellesEsprit d?équipe, curiosité intellectuelle et envie d?évoluer dans un environnement collaboratif.
Excellente capacité à communiquer, à vulgariser et à partager vos connaissances avec les différents membres de l'équipe.
Profil candidat:
Profil recherchéExpérience : Vous justifiez d'une expérience solide (Senior) en Data Engineering, avec une expertise éprouvée sur les environnements de production à grande échelle.
Orientation Solution & Performance : Vous avez une forte sensibilité aux problématiques de performance, d'optimisation des coûts (FinOps) et de qualité de code (bonnes pratiques CI/CD).
Adaptabilité : Vous êtes autonome, rigoureux(se) et capable de vous approprier rapidement des architectures Cloud complexes.
Astreintes : Vous êtes ouvert(e) à participer à des roulements d?astreintes pour garantir le maintien en condition opérationnelle des applications.