Data Engineer confirmé(e)

eXalt; Lille; Vor Ort; EUR 55.000 - 75.000; Vollzeit

Zusammenfassung

eXalt Lille, filiale du groupe spécialisé sur les métiers du Product & Project Management et notre expertise IT, recherche son/sa nouveau/elle Data Engineer confirmé(e) pour aller à la conquête de nouveaux projets techniques ! Vous évoluerez dans un contexte multi sociétés et challengeant.

Au sein du cercle Lillois, vous bénéficierez des échanges avec une communauté de plus de 100 consultants aux parcours et expertises métiers riches et variés.

Qualifikationen

• Maîtrise d’un ou plusieurs langages Python/Scala/Spark.
• Expérience approfondie des technologies Big Data (Hadoop, Spark, Kafka, Talend).
• Expérience en environnement Cloud (AWS, GCP ou Azure) et conception de pipelines.

Aufgaben

• Concevoir et développer des pipelines et des flux de données.
• Intégrer et transformer des données provenant de sources variées.
• Développer et mettre en œuvre des algorithmes de traitement de données avancés.
• Collaborer avec les équipes clients pour comprendre leurs besoins et proposer des solutions adaptées.
• Assurer la qualité et la fiabilité des solutions développées.
• Conseiller les équipes clients sur les solutions à mettre en place.

Kenntnisse

Python

Scala

Spark

Big Data

Kafka

Talend

AWS

GCP

Azure

Data pipelines

SQL

Airflow

Pandas

Tools

Git

Github

CI/CD

Docker

DBT

Dataflow

Jobbeschreibung

eXalt Lille, filiale du groupe spécialisé sur les métiers du Product & Project Management et notre expertise IT, recherche son/sa nouveau/elle Data Engineer confirmé(e) pour aller à la conquête de nouveaux projets techniques ! Vous évoluerez dans un contexte multi sociétés et challengeant.

Au sein du cercle Lillois, vous bénéficierez des échanges avec une communauté de plus de 100 consultants aux parcours et expertises métiers riches et variés.

Nous recherchons des talents du test aimant le challenge, avec une vraie soif d’apprendre, passionnés par le software craftmanship, prêts à collaborer avec les différentes équipes de nos clients !

Vos missions:

• Concevoir et développer des pipelines et des flux de données.
• Intégrer et transformer des données provenant de différentes sources.
• Développer et mettre en œuvre des algorithmes de traitement de données avancés.
• Collaborer étroitement avec les équipes clients pour comprendre leurs besoins et fournir des solutions adaptées.
• Assurer la qualité et la fiabilité des solutions développées.
• Conseiller les équipes clients sur les solutions à mettre en place.

Les Prérequis :Maîtrise d’un ou plusieurs langages de programmation (Python, Scala, Spark, etc.).Expérience approfondie des technologies Big Data (Hadoop, Spark, Kafka, Talend, etc.).Expérience avérée en environnement Cloud (AWS, GCP, ou Azure).Solides compétences en conception et en optimisation de pipelines de données.Expérience de travail en méthode AgileCapacité à travailler de manière autonome et en équipe.Excellentes compétences en communication et en résolution de problèmes.Maîtrise de l’anglais (oral & écrit dans un contexte international professionnel).

Les Prérequis :Maîtrise d’un ou plusieurs langages de programmation (Python, Scala, Spark, etc.).Expérience approfondie des technologies Big Data (Hadoop, Spark, Kafka, Talend, etc.).Expérience avérée en environnement Cloud (AWS, GCP, ou Azure).Solides compétences en conception et en optimisation de pipelines de données.Expérience de travail en méthode AgileCapacité à travailler de manière autonome et en équipe.Excellentes compétences en communication et en résolution de problèmes.Maîtrise de l’anglais obligatoire (oral & écrit dans un contexte international professionnel).

Les périmètres techniques de nos clients : Data-platform & Cloud : Google Cloud Platform (Big Query, Dataflow, VertexIA, Cloud Functions, Cloud Run) Amazon Web Services (S3, Glue, Redshift, Lambda) Code Programming : SQL, Python (Pandas, PySpark, NumPy), Scala Data orchestration : Airflow Data modeling & transformation : DBT Software Delivery : Git, Github, CI/CD, Docker