Manager / Senior Manager - Tech Lead Data - Databricks F/H FY27

EY; Paris; Sur place; EUR 90 000 - 130 000; Plein temps

Avantages offerts par ce poste

Programme de formation complet

Mentorat tout au long de la carrière

Communautés de compétences et sectori

Mobilités internationales

Résumé du poste

EY recherche un Tech Lead Data Engineer – Databricks pour piloter des projets Data et concevoir des architectures Lakehouse robustes. Vous serez référent technique auprès des Data Engineers et contribuerez à l’industrialisation des pipelines sur Databricks.

Vous piloterez des ateliers avec les métiers et les IT clients, assurerez la gouvernance des données et encadrerez des équipes sur des environnements cloud (Azure, AWS ou GCP).

Qualifications

• Formation BAC+5 (Master 2 ou ingénieur) en informatique.
• Minimum 6 ans d’expérience Data Engineering avec expérience de Tech Lead.
• Maîtrise Apache Spark, Delta Lake et Databricks (y compris Unity Catalog).
• Connaissance des architectures Lakehouse et des infra modernes (Kubernetes, Docker).
• Expérience Databricks sur Azure/AWS/GCP et gouvernance des données.
• Programmation Python, SQL et PySpark; Scala/Java sont un plus.
• Culture DevOps, CI/CD et Infrastructure as Code pour Databricks.
• Rôle de référent technique et encadrement d’équipes.

Responsabilités

• Définir et piloter des cas d’usage Data avec les parties prenantes.
• Concevoir des architectures Lakehouse sur Databricks avec les PO et architectes.
• Industrialiser les pipelines Spark/Delta Lake et assurer leur performance.
• Gouvernance et sécurité via Unity Catalog, standards de développement et exploitation.
• Piloter CI/CD et Infra as Code en lien avec Azure/AWS/GCP.
• Encadrer et coacher les équipes de développement et assurer le delivery.
• Évaluer les évolutions Databricks et nouvelles briques technologiques.

Connaissances

Data Engineering

Tech Lead

Python

SQL

PySpark

Apache Spark

Delta Lake

Databricks

Unity Catalog

Kubernetes

Docker

CI/CD

Infrastructure as Code

Azure/AWS/GCP

English professionnel

Formation

BAC+5 Master 2 / ingénieur

Outils

Apache Spark

Delta Lake

Databricks

Kubernetes

Docker

Unity Catalog

Python

SQL

PySpark

Azure Databricks / AWS / GCP

CI/CD tools

Infrastructure as Code

Description du poste

Digital & IA Engineering

EY accompagne ses clients dans leurs transitions numérique au travers de nos compétences :

• Digital & IA Engineering,
• Digital & Data Driven Marketing

Nous activons pour nos clients les meilleures combinatoires de talents individuels et de méthodologies à la pointe, avec toujours l’objectif de les rendre le plus autonome possible. Organisés en Squad Projets Agile, nous aidons de grands comptes, privés ou public, à développer des produits au plus proches de leurs besoins métiers.

• Mettre l’IA et la data au cœur des stratégies de décision, en éditant des logiciels sur mesure et en créant des modèles de valeur centrés sur les parties prenantes.
• Produire des solutions sur mesure reposant sur des pratiques communes et un socle technique affuté depuis des années par la communauté Tech et Design
• Garantir un processus de Delivery Continu afin de répondre à leurs enjeux marché

Quelques-uns de nos clients : Canal+, G7, RATP, Saint Gobain, EDF, ENI, Caisse nationale de solidarité pour l'autonomie, CNAM, Renault …

Description De L'emploi

Passionné(e) par la Data, expert(e) en Data Engineering et spécialiste de la plateforme Databricks, vous souhaitez piloter des projets d’envergure et continuer à développer votre expertise technique.

EY recherche un(e) Tech Lead Data Engineer – Databricks

Pour piloter techniquement des projets Data, concevoir des architectures Lakehouse robustes et prendre le rôle de référent technique auprès des équipes de Data Engineers.

Tes missions en tant que Tech Lead Data Engineering – Databricks :

• Accompagnement à la définition/validation de cas d’usage via des ateliers avec les collaborateurs métiers et IT de nos clients
• Définition et mise en œuvre d’architectures Data Lakehouse sur Databricks, en collaboration avec les Product Owners (PO), les architectes techniques et/ou applicatifs
• Conception et industrialisation de pipelines avec Apache Spark, Delta Lake, Databricks Workflows et Delta Live Tables / Lakeflow, en garantissant performance, résilience et observabilité
• Mise en place de la gouvernance, de la sécurité et du contrôle des accès avec Unity Catalog, ainsi que des standards de développement, de déploiement et d’exploitation de la plateforme
• Pilotage des pratiques CI/CD et Infrastructure as Code pour Databricks, en lien avec les environnements cloud Azure, AWS ou GCP
• Gestion des backlog techniques des projets Data en étroite collaboration avec les Product Owners et participation active aux différentes occurrences Agile (daily meeting, démo, rétrospective,…)
• Participation active aux développements sur Databricks (ingestion, transformation, mise en qualité, enrichissement et exposition des données) tout en assurant la qualité du delivery des équipes : revue de code, optimisation, refactoring et bonnes pratiques
• Encadrement et coaching des équipes de développement dans les réalisations et dans la mise en place et le respect des bonnes pratiques
• Étude et évaluation des évolutions de la plateforme Databricks et de nouvelles briques technologiques afin de valider leur pertinence et leur intégration dans les architectures Data existantes
• Participation à la sélection et à l’évaluation des ressources identifiées pour renforcer les équipes de développement

Formation & compétences requises :

• Tu disposes d’une formation niveau BAC+5 (Master 2 ou école d’ingénieur) spécialisée en informatique et vous avez au moins 6 ans d’expérience en Data Engineering avec au moins une expérience concrète en tant que Tech Lead
• Tu maîtrises parfaitement Apache Spark, Delta Lake, les notebooks et jobs Databricks, ainsi que les principes d’architecture Lakehouse et les technologies d’infrastructure modernes (Kubernetes, Docker, …)
• Tu justifies d’une expérience significative dans la conception et l’industrialisation de solutions Data Engineering sur Databricks, idéalement sur Azure Databricks, AWS ou GCP, et tu maîtrises Unity Catalog, les mécanismes de sécurité et la gouvernance des données
• La programmation n’a plus de secret pour toi et tu maîtrises parfaitement Python, SQL et PySpark ; Scala et Java constituent des atouts complémentaires
• Tu maîtrises parfaitement la philosophie DevOps, les outils CI/CD et les approches Infrastructure as Code appliquées à Databricks
• Tu as déjà occupé un rôle de référent technique ou Tech Lead, où tu as encadré des équipes de développeurs, et tu sais gérer des projets à fort enjeu technique.
• Tu es capable de concevoir des architectures Lakehouse robustes, sécurisées, performantes et évolutives, en tenant compte des besoins métiers, des contraintes de coûts, de performance et des exigences de sécurité
• Tu es capable de prendre des décisions techniques stratégiques, en impliquant toutes les sensibilités de ton équipe, tout en prenant en compte les contraintes du projet.
• Tu sais vulgariser des concepts techniques complexes et les expliquer à des interlocuteurs non techniques. À l’écoute des besoins des clients, tu proposes des solutions de compris apportant le meilleur équilibre technique et fonctionnel.
• Tu es constamment à jour sur les dernières tendances et technologies, et tu aimes partager tes découvertes avec ton équipe.
• Tu es à l’aise avec les problématiques d’intégration de Databricks dans un écosystème Data moderne : orchestration, streaming, APIs, BI, MLOps et services cloud
• Tu disposes de la certification Databricks Certified Data Engineer Professional, attendue pour ce rôle. La certification Databricks Certified Data Engineer Associate constitue le niveau minimum ; les certifications Databricks Certified Machine Learning Professional ou Databricks Certified Generative AI Engineer Associate sont appréciées selon les missions
• Tu disposes d’un bon niveau d’anglais tant à l’oral qu’à l’écrit

Et parce que nous savons qu’un job n’est pas juste un job, chez EY nous mettons un point d’honneur à offrir à nos collaborateurs une expérience qui les accompagnera à vie dans leur carrière. Vous aurez l’opportunité :

• De travailler pour les plus grands clients internationaux leaders dans leurs secteurs, au sein d’équipes diverses et multiculturelles
• De suivre un programme de formation complet et personnalisé, et d’avoir un mentor tout au long de votre carrière
• D’appartenir à des communautés de compétences et sectorielles internationales, composées de professionnels parmi les meilleurs en Europe
• De contribuer à un conseil zéro carbone. EY place la RSE au cœur de son projet stratégique avec pour ambition de faire évoluer ses pratiques internes (outil de calcul de l’impact de nos missions, zéro papier, usages numériques…)
• De vivre des mobilités géographiques et de pouvoir découvrir d’autres cultures grâce à notre programme Mobility4U
• De s’engager à travers nos réseaux internes autour de sujets liés à l’écologie, la diversité et l’inclusion, et de prendre part en tant que mécène aux initiatives de notre très active fondation sur des grandes causes à impact
• De être présent à de nombreux événements made in EY (prix de l’entrepreneur de l’année, Woman In, T-DAY, Sustainable Futures, etc.)

Dans le cadre de sa politique Diversité, Equité et Inclusion, EY étudie, à compétences égales, toutes candidatures dont celles de personnes en situation de handicap.