Data Engineer confirmé(e)

eXalt; Lille; Sur place; EUR 45 000 - 65 000; Plein temps

Résumé du poste

eXalt Lille, filiale du groupe spécialisé sur les métiers du Product & Project Management et notre expertise IT, recherche son/sa nouveau/elle Data Engineer confirmé(e) pour aller à la conquête de nouveaux projets techniques !

Vous évoluerez dans un contexte multi sociétés et challengeant, en restant proche d’une communauté de plus de 100 consultants. Maîtrise d’anglais exigée et expérience en Cloud bienvenue.

Qualifications

• Maîtrise d’au moins un langage (Python/Scala/Spark).
• Expérience solide avec les technologies Big Data (Hadoop/Spark/Kafka/Talend).
• Expérience en Cloud (AWS/GCP/Azure).
• Conception et optimisation de pipelines de données.
• Approches Agile et travail en équipe.
• Bonnes capacités de communication et résolution de problèmes.
• Anglais écrit et oral dans un contexte international.

Responsabilités

• Concevoir et développer des pipelines et flux de données.
• Intégrer et transformer des données de sources variées.
• Développer des algorithmes de traitement avancés.
• Collaborer avec les équipes clients et livrer des solutions adaptées.
• Assurer qualité et fiabilité des solutions; conseiller les clients.

Connaissances

Python

Scala

Spark

Big Data

Agile

Communication

Anglais

Outils

Hadoop

Kafka

Talend

Airflow

SQL

DBT

Description du poste

eXalt Lille, filiale du groupe spécialisé sur les métiers du Product & Project Management et notre expertise IT, recherche son/sa nouveau/elle Data Engineer confirmé(e) pour aller à la conquête de nouveaux projets techniques ! Vous évoluerez dans un contexte multi sociétés et challengeant.

Au sein du cercle Lillois, vous bénéficierez des échanges avec une communauté de plus de 100 consultants aux parcours et expertises métiers riches et variés.

Nous recherchons des talents du test aimant le challenge, avec une vraie soif d’apprendre, passionnés par le software craftmanship, prêts à collaborer avec les différentes équipes de nos clients !

Vos missions:

• Concevoir et développer des pipelines et des flux de données.
• Intégrer et transformer des données provenant de différentes sources.
• Développer et mettre en œuvre des algorithmes de traitement de données avancés.
• Collaborer étroitement avec les équipes clients pour comprendre leurs besoins et fournir des solutions adaptées.
• Assurer la qualité et la fiabilité des solutions développées.
• Conseiller les équipes clients sur les solutions à mettre en place.

Les Prérequis :

• Maîtrise d’un ou plusieurs langages de programmation (Python, Scala, Spark, etc.).
• Expérience approfondie des technologies Big Data (Hadoop, Spark, Kafka, Talend, etc.).
• Expérience avérée en environnement Cloud (AWS, GCP, ou Azure).
• Solides compétences en conception et en optimisation de pipelines de données.
• Expérience de travail en méthode Agile.
• Capacité à travailler de manière autonome et en équipe.
• Excellentes compétences en communication et en résolution de problèmes.
• Maîtrise de l’anglais (oral & écrit dans un contexte international professionnel).

Les Prérequis :

• Maîtrise d’un ou plusieurs langages de programmation (Python, Scala, Spark, etc.).
• Expérience approfondie des technologies Big Data (Hadoop, Spark, Kafka, Talend, etc.).
• Expérience avérée en environnement Cloud (AWS, GCP, ou Azure).
• Solides compétences en conception et en optimisation de pipelines de données.
• Expérience de travail en méthode Agile.
• Capacité à travailler de manière autonome et en équipe.
• Excellentes compétences en communication et en résolution de problèmes.
• Maîtrise de l’anglais obligatoire (oral & écrit dans un contexte international professionnel).

Les périmètres techniques de nos clients :

• Data-platform & Cloud : Google Cloud Platform (Big Query, Dataflow, VertexIA, Cloud Functions, Cloud Run)
• Amazon Web Services (S3, Glue, Redshift, Lambda)
• Code Programming : SQL, Python (Pandas, PySpark, NumPy), Scala
• Data orchestration : Airflow
• Data modeling & transformation : DBT
• Software Delivery : Git, Github, CI/CD, Docker