Nous recherchons un Tech Lead Data Engineer expérimenté H/F en CDI sur Lyon pour une entreprise de renommée française afin de piloter la conception et l?évolution de notre plateforme data. Vous serez référent technique sur les sujets liés au traitement de données massives, à l?industrialisation des pipelines et à l?optimisation des architectures data.
Vous interviendrez dans un environnement moderne orienté Big Data et Cloud, avec une forte utilisation de Python, Spark et des outils d?automatisation CI/CD.
3 jours de Télétravail
Missions principales
Concevoir et développer des pipelines de données robustes et scalables
Encadrer techniquement l?équipe Data Engineering
Développer des traitements distribués avec Spark
Assurer l?intégration et la transformation de données à grande échelle
Optimiser les performances des bases PostgreSQL et des traitements Big Data
Participer à l?architecture des solutions Hadoop et Data Lake
Industrialiser les déploiements via GitLab CI/CD
Garantir la qualité, la sécurité et la fiabilité des données
Collaborer avec les équipes Data Science, DevOps et métiers
Mettre en place les bonnes pratiques de développement et de gouvernance data
Profil candidat:
Profil recherché
Stack technique
Langages : Python, SQL
Big Data : Spark, Hadoop
Bases de données : PostgreSQL
CI/CD & DevOps : GitLab, GitLab CI/CD
Outils complémentaires : Docker, Kubernetes, Airflow
Versionning : Git
Profil recherché
Minimum 5 ans d?expérience en Data Engineering
Solide expertise en Python et Spark
Leadership technique et esprit collaboratif
Excellentes capacités d?analyse et de résolution de problèmes
