Taux journalier (TJM): 600-650
Dans le cadre de la modernisation et de l’industrialisation d’une plateforme Data Azure à forte volumétrie, nous recherchons un(e) Tech Lead / Senior Solution Architect Databricks pour accompagner la transformation des usages Data autour des enjeux suivants :
Migration et industrialisation des workloads vers Databricks
Gouvernance et qualité des données
Optimisation des performances et des coûts cloud (FinOps)
Accompagnement des équipes Data sur les bonnes pratiques d’architecture, de delivery et d’industrialisation
Environnement :
Concevoir, développer et maintenir des pipelines de données à forte volumétrie
Participer à la structuration d’une plateforme Data moderne sous Azure Databricks
Développer des traitements batch et streaming dans une architecture Lakehouse
Contribuer à la définition et à l’évolution de l’architecture cible
Industrialiser les pipelines dans une logique DevOps avancée
Mettre en place les bonnes pratiques CI/CD, tests et automatisation des déploiements
Fiabiliser les environnements et accompagner les mises en production
Garantir le respect des standards techniques et des patterns d’architecture
Participer aux sujets de gouvernance et de qualité des données
Optimiser les performances des traitements Spark et la consommation des ressources cloud
Contribuer aux démarches FinOps et Green IT
Participer au maintien en conditions opérationnelles de la plateforme (support N3)
Analyser et résoudre les incidents complexes de production
Accompagner et mentorer les équipes sur les bonnes pratiques techniques
Animer des sujets transverses et jouer un rôle de référent technique selon la séniorité
Minimum 5 ans d’expérience en Data Engineering
Expérience significative sur des projets de migration et transformation Databricks
Expérience en encadrement technique, mentoring ou lead d’équipes/projets Data
Capacité à évoluer dans des environnements complexes et industrialisés
Capacité à intervenir en lead technique (accompagnement des équipes, mentoring, bonnes pratiques)
Forte expertise Databricks
Très bonne maîtrise de SQL / Spark / Scala / Python
Maîtrise des architectures Data modernes : lakehouse, batch & streaming, big data / fast data
Expérience Azure Cloud
Bonne maîtrise des enjeux de gouvernance, qualité des données et optimisation des performances (est un + : maîtrise de Unity Catalog)
Bonne maîtrise des outils CI/CD et d’industrialisation : GitLab CI, Jenkins, Terraform, Docker, Kubernetes
