Tech Lead Big Data - Senior

ALTER SOLUTIONS; Paris; Sur place; EUR 60 000 - 80 000; Plein temps

Résumé du poste

Une entreprise spécialisée dans la transformation numérique recherche un(e) expert(e) en gestion de la donnée pour développer des pipelines ETL/ELT en PySpark sur Databricks. Le candidat idéal justifie de 6 ans d'expérience, maîtrise Python et Azure, et saura encadrer une équipe de Data Engineers. Ce rôle implique également de collaborer étroitement avec les Product Owners et de garantir la sécurité et conformité des données.

Prestations

Opportunités de R&D

Participation à des événements techniques

Formations en interne

Qualifications

• 6 ans minimum d'expérience au sein d’une équipe data/big data dans un environnement Agile.
• Maîtrise du développement en Python, PySpark, et Spark SQL.
• Expérience solide avec Databricks.
• Familiarité avec l'environnement Microsoft Azure et les pratiques CI/CD.

Responsabilités

• Développer et maintenir des pipelines ETL/ELT en PySpark sur Databricks.
• Encadrer une équipe de Data Engineers et garantir la qualité du code.
• Contribuer à la conception des architectures sur Azure.
• Collaborer avec les Product Owners pour qualifier les besoins.
• Assurer la sécurité et la conformité des traitements de données.
• Assurer une veille technologique sur les écosystèmes Big Data / Azure.

Connaissances

Python

PySpark

Spark SQL

Microsoft Azure

CI/CD (Azure DevOps, Jenkins)

Formation

Bac+5 (École d'ingénieur, Université ou équivalent)

Outils

Databricks

Description du poste

Vous intégrerez, au sein de notre Pôle Transformation Numérique, une équipe d’experts en gestion de la donnée en charge d'accompagner nos clients.

Vous serez détaché(e) chez un acteur majeur du secteur de l'assurance dans une équipe organisée en squad, et interviendrez sur un projet de modernisation de la plateforme data.

Vos missions seront les suivantes :

Développer et maintenir des pipelines ETL/ELT en PySpark sur Databricks pour le traitement de données à grande échelle.

Encadrer une équipe de Data Engineers, garantir la qualité du code, assurer le respect des bonnes pratiques et participer aux revues de code.

Architecture Big Data : Contribuer à la conception des architectures sur Azure (Data Lake, ADF, SQL, Blob), proposer des optimisations et innover sur les solutions techniques.

Travailler en étroite collaboration avec les Product Owners pour qualifier les besoins, estimer les charges et respecter les délais.

Garantir la sécurité, la confidentialité et la conformité réglementaire (RGPD) des traitements de données.

Assurer une veille technologique sur les écosystèmes Big Data / Azure et contribuer à l'amélioration continue des pratiques data de l’équipe.

• Vous êtes issu(e) d’une formation Bac+5 (École d’ingénieur, Université ou équivalent …) en informatique
• Vous justifiez de 6 ans minimum d'expérience au sein d’une équipe data/big data dans un environnement Agile
• Vous maîtrisez le développement en Python, PySpark, Spark SQL
• Vous avez une expérience solide avec Databricks
• Vous êtes familier de l'environnement Microsoft Azure etdes pratiques CI/CD (Azure DevOps, Jenkins).

Description du poste

Vous intégrerez, au sein de notre Pôle Transformation Numérique, une équipe d’experts en gestion de la donnée en charge d'accompagner nos clients.

Vous serez détaché(e) chez un acteur majeur du secteur de l'assurance dans une équipe organisée en squad, et interviendrez sur un projet de modernisation de la plateforme data.

Vos missions seront les suivantes :

• Développer et maintenir des pipelines ETL/ELT en PySpark sur Databricks pour le traitement de données à grande échelle.

• Encadrer une équipe de Data Engineers, garantir la qualité du code, assurer le respect des bonnes pratiques et participer aux revues de code.

• Architecture Big Data : Contribuer à la conception des architectures sur Azure (Data Lake, ADF, SQL, Blob), proposer des optimisations et innover sur les solutions techniques.

• Travailler en étroite collaboration avec les Product Owners pour qualifier les besoins, estimer les charges et respecter les délais.

• Garantir la sécurité, la confidentialité et la conformité réglementaire (RGPD) des traitements de données.

• Assurer une veille technologique sur les écosystèmes Big Data / Azure et contribuer à l'amélioration continue des pratiques data de l’équipe.

Qualifications

• Vous êtes issu(e) d’une formation Bac+5 (École d’ingénieur, Université ou équivalent …) en informatique
• Vous justifiez de 6 ans minimum d'expérience au sein d’une équipe data/big data dans un environnement Agile

• Vous maîtrisez le développement en Python, PySpark, Spark SQL
• Vous avez une expérience solide avec Databricks
• Vous êtes familier de l'environnement Microsoft Azure etdes pratiques CI/CD (Azure DevOps, Jenkins).

Informations supplémentaires

Au-delà de vos expertises et compétences, nous recrutons aussi des personnalités, qui vont participer au développement d’Act Digital.

Chez Act Digital, vous pourrez être sollicitéspour :

• Intervenir sur des phases de recrutement
• Participer à des projets de R&D et veille
• Rédiger des articles techniques et de publications diverses
• Participer à des phases d’avant-vente
• Animer des formations en interne
• Participer à nos évènements mensuels d’Alter Campus, rendez-vous techniques de partages et d’échanges
• Représenter ALTER SOLUTIONS dans le cadre d’évènements (Devoxx, Hackathon, Cloud Expo Europe…)

Notre processus de recrutement se décompose ainsi:

• Un premier entretien à distance
• Test technique
• Rencontre avec un Directeur Opérationnel et un Consultant Sénior
• Si tout se passe bien, contractualisation RH

If you applied for this position the Controller of your personal will be ALTER SOLUTIONS France, with its registered office at 6 avenue du Général de Gaulle 78000 Versailles. The personal data provided by you will be processed for the purpose of the recruitment process andfor future recruitment processes.

You have the right to access the content of your data, request their rectification, erasure, restriction of processing, the right to data portability, the right to object to the processing of your data and the right to lodge a complaint to the DPO ([emailprotected] ).