Manager / Senior Manager - Tech Lead Data - Databricks F/H

Ernst & Young Advisory Services Sdn Bhd; Saint-Ouen-l'Aumône; On-site; EUR 90,000 - 150,000; Full time

Job summary

EY recherche un Tech Lead Data Engineer – Databricks pour piloter des projets Data, concevoir des architectures Lakehouse robustes et agir comme référent technique auprès des Data Engineers.

Vous optimiserez les pipelines et garantirez performance, sécurité et qualité du delivery, tout en encadrant les équipes et en participant aux pratiques CI/CD dans les environnements cloud.

Qualifications

• Formation BAC+5 en informatique ou équivalent.
• Expérience significative en Data Engineering et leadership technique.
• Maîtrise Databricks, Spark, Python et SQL.
• Connaissance des architectures Lakehouse et sécurité des données.

Responsibilities

• Définir et piloter des architectures Data Lakehouse sur Databricks.
• Diriger techniquement les projets Data et encadrer les équipes Data.
• Mettre en place des pipelines robustes et scalables (ETL/ELT).
• Assurer la gouvernance, la sécurité et l’observabilité des données.

Skills

Databricks

Python

SQL

Delta Lake

Spark

Cloud architecture

Education

Master 2 en Informatique

Tools

Azure Databricks

Unity Catalog

CI/CD tools

Kubernetes

Job description

Location: Paris La Défense

EY accompagne ses clients dans leurs transitions numérique au travers de nos compétences :

Nous activons pour nos clients les meilleures combinatoires de talents individuels et de méthodologies à la pointe, avec toujours l’objectif de les rendre le plus autonome possible. Organisés enSquad Projets Agile, nous aidons de grands comptes, privés ou public, à développer des produits au plus proches de leurs besoins métiers.

NosexpertsTech & Data/IA (Ingénieurs en IA, Data Scientists, Machine Learning Engineers, Développeurs Back, Front, Mobile, Designers d’expérience, Product Owners/Chefs de Projet) ont pour objectif de :

• Mettre l’IA et la data au cœur des stratégies de décision, en éditant des logiciels sur mesure et en créant des modèles de valeur centrés sur les parties prenantes.
• Produire des solutions sur mesure reposant sur des pratiques communes et un socle technique affuté depuis des années par la communauté Tech et Design
• Garantir unprocessus de Delivery Continuafin de répondre à leurs enjeux marché

Quelques-uns de nos clients :Canal+, G7, RATP, Saint Gobain, EDF, ENI, Caisse nationale de solidarité pour l'autonomie, CNAM, Renault …

Description de l'emploi

Passionné(e) par la Data, expert(e) en Data Engineering et spécialiste de la plateforme Databricks, vous souhaitez piloter des projets d’envergure et continuer à développer votre expertise technique.

EY recherche un(e) Tech Lead Data Engineer – Databricks pour piloter techniquement des projets Data, concevoir des architectures Lakehouse robustes et prendre le rôle de référent technique auprès des équipes de Data Engineers.

Tes missions en tant que Tech Lead Data Engineering – Databricks :

• Accompagnement à la définition/validation de cas d’usage via des ateliers avec les collaborateurs métiers et IT de nos clients
• Définition et mise en œuvre d’architectures Data Lakehouse sur Databricks, en collaboration avec les Product Owners (PO), les architectes techniques et/ou applicatifs
• Conception et industrialisation de pipelines avec Apache Spark, Delta Lake, Databricks Workflows et Delta Live Tables / Lakeflow, en garantissant performance, résilience et observabilité
• Mise en place de la gouvernance, de la sécurité et du contrôle des accès avec Unity Catalog, ainsi que des standards de développement, de déploiement et d’exploitation de la plateforme
• Pilotage des pratiques CI/CD et Infrastructure as Code pour Databricks, en lien avec les environnements cloud Azure, AWS ou GCP
• Gestion des backlog techniques des projets Data en étroite collaboration avec les Product Owners et participation active aux différentes occurrences Agile (daily meeting, démo, rétrospective,…)
• Participation active aux développements sur Databricks (ingestion, transformation, mise en qualité, enrichissement et exposition des données) tout en assurant la qualité du delivery des équipes : revue de code, optimisation, refactoring et bonnes pratiques
• Encadrement et coaching des équipes de développement dans les réalisations et dans la mise en place et le respect des bonnes pratiques
• Étude et évaluation des évolutions de la plateforme Databricks et de nouvelles briques technologiques afin de valider leur pertinence et leur intégration dans les architectures Data existantes
• Participation à la sélection et à l’évaluation des ressources identifiées pour renforcer les équipes de développement

Formation & compétences requises :

• Tu disposes d’une formation niveau BAC+5 (Master 2 ou école d’ingénieur) spécialisée en informatique et vous avez au moins 6 ans d’expérience en Data Engineering avec au moins une expérience concrète en tant que Tech Lead
• Tu maîtrises parfaitement Apache Spark, Delta Lake, les notebooks et jobs Databricks, ainsi que les principes d’architecture Lakehouse et les technologies d’infrastructure modernes (Kubernetes, Docker, …)
• Tu justifies d’une expérience significative dans la conception et l’industrialisation de solutions Data Engineering sur Databricks, idéalement sur Azure Databricks, AWS ou GCP, et tu maîtrises Unity Catalog, les mécanismes de sécurité et la gouvernance des données
• La programmation n’a plus de secret pour toi et tu maîtrises parfaitement Python, SQL et PySpark ; Scala et Java constitue des atouts complémentaires
• Tu maîtrises parfaitement la philosophie DevOps, les outils CI/CD et les approches Infrastructure as Code appliquées à Databricks
• Tu as déjà occupé unrôle de référent technique ou Tech Lead, où tu as encadré des équipes de développeurs, et tu sais gérer des projets à fort enjeu technique.
• Tu es capable de concevoir des architectures Lakehouse robustes, sécurisées, performantes et évolutives, en tenant compte des besoins métiers, des contraintes de coûts, de performance et des exigences de sécurité
• Tu es capable deprendre des décisions techniques stratégiques, en impliquant toutes les sensibilités de ton équipe, tout en prenant en compte les contraintes du projet.
• Tu saisvulgariser des concepts techniques complexeset les expliquer à des interlocuteurs non techniques. À l’écoute des besoins des clients, tu proposes des solutions de compris apportant le meilleur équilibre technique et fonctionnel.
• Tu es constammentà jour sur les dernières tendances et technologies, et tu aimes partager tes découvertes avec ton équipe.
• Tu es à l’aise avec les problématiques d’intégration de Databricks dans un écosystème Data moderne : orchestration, streaming, APIs, BI, MLOps et services cloud
• Tu disposes de la certification Databricks Certified Data Engineer Professional, attendue pour ce rôle. La certification Databricks Certified Data Engineer Associate constitue le niveau minimum ; les certifications Databricks Certified Machine Learning Professional ou Databricks Certified Generative AI Engineer Associate sont appréciées selon les missions
• Tu disposes d’unbon niveau d’anglaistant à l’oral qu’à l’écrit

Vivez l’expérience EY Consulting, rejoignez-nous !

Et parce que nous savons qu’un job n’est pas juste un job, chez EY nous mettons un point d’honneur à offrir à nos collaborateurs une expérience qui les accompagnera à vie dans leur carrière. Vous aurez l’opportunité :

• De travailler pour les plus grands clients internationaux leaders dans leurs secteurs, au sein d’équipes diverses et multiculturelles
• De suivre un programme de formation complet et personnalisé, et d’avoir un mentor tout au long de votre carrière
• D’appartenir à des communautés de compétences et sectorielles internationales, composées de professionnels parmi les meilleurs en Europe
• De contribuer à un conseil zéro carbone. EY place la RSE au cœur de son projet stratégique avec pour ambition de faire évoluer ses pratiques internes (outil de calcul de l’impact de nos missions, zéro papier, usages numériques..)
• De vivre des mobilités géographiques et de pouvoir découvrir d’autres cultures grâce à notre programme Mobility4U
• De s’engager à travers nos réseaux internes autour de sujets liés à l’écologie, la diversité et l’inclusion, et de prendre part en tant que mécène aux initiatives de notre très active fondationsur des grandes causes à impact
• D’être présent à de nombreux événements made in EY (prix de l’entrepreneur de l’année, Woman In, T-DAY, Sustainable Futures, etc.)

Dans le cadre de sa politique Diversité, Equité et Inclusion, EY étudie, à compétences égales, toutes candidatures dont celles de personnes en situation de handicap.