Dans le cadre de projets d'intégration de données à forte valeur ajoutée, nous recherchons un Data Engineer Senior maîtrisant l'écosystème Databricks sur GCP.
Vos principales missions :
Conception et développement de jobs d'intégration de données en PySpark, Spark et Python, en modes streaming et batch, sur la plateforme Databricks
Mise en ?uvre des chaînes CI/CD (GitHub, DevOps, Databricks Asset Bundles), de l'orchestration, du data management et de la sécurité
Optimisation des jobs et des ressources cloud (GCP et Databricks)
Mise en place de dashboards FinOps pour le suivi de l'usage des ressources GCP / Databricks
Participation aux astreintes et au support en production de l'application
Rédaction de documentation, formation continue et partage de connaissances au sein de l'équipe
Profil candidat:
Data Engineer Senior justifiant d'une solide expérience sur Databricks en environnement de production, idéalement sur GCP. Vous avez déjà travaillé sur des architectures data en streaming et en batch, et vous êtes à l'aise avec les enjeux d'industrialisation (CI/CD, sécurité, FinOps). Vous appréciez le travail en équipe et le partage de bonnes pratiques.