Senior Data Engineer – Spark/Scala in AI-Driven Team

Devoteam Data Driven; Lyon; Sur place; EUR 45 000 - 55 000; Plein temps

Avantages offerts par ce poste

Environnement d'apprentissage continu

Certifications professionnelles

Accès à des technologies innovantes

Résumé du poste

Une entreprise spécialisée en transformation digitale recherche un Data Engineer Senior à Lyon. Vous serez au cœur des projets data, de la conception à la mise en production, en utilisant Apache Spark et Scala. Une forte expertise dans la conception de pipelines de données et des compétences en méthodologie agile sont requises. Ce poste offre l'opportunité de travailler avec des clients de divers secteurs, notamment la banque et l'assurance.

Qualifications

• Expérience significative d'au moins 5 ans dans un rôle similaire.
• Capacité à travailler avec des volumes de données importants.
• Compétences en méthodologie agile.

Responsabilités

• Concevoir et optimiser des pipelines de données.
• Mettre en œuvre des solutions de traitement de données.
• Assurer la qualité et la performance des données.
• Collaborer avec des équipes interdisciplinaires.

Connaissances

Maîtrise d'Apache Spark

Maîtrise de Scala

Conception de pipelines ETL/ELT

Intégration CI/CD (Jenkins, Gitlab)

Écosystèmes Big Data (Hadoop, Kafka)

Autonomie

Rigueur

Capacité à résoudre des problèmes complexes

Esprit d'équipe

Capacités de communication

Formation

Diplôme d'ingénieur ou Master 2 dans le domaine de la Data

Outils

Apache Spark

Scala

Jenkins

Gitlab

Description du poste

Une entreprise spécialisée en transformation digitale recherche un Data Engineer Senior à Lyon. Vous serez au cœur des projets data, de la conception à la mise en production, en utilisant Apache Spark et Scala. Une forte expertise dans la conception de pipelines de données et des compétences en méthodologie agile sont requises. Ce poste offre l'opportunité de travailler avec des clients de divers secteurs, notamment la banque et l'assurance.