Data Engineer H / F

Size Up Consulting; Lyon; Sur place; EUR 40 000 - 55 000; Plein temps

Résumé du poste

Une entreprise de conseil en données recherche un Data Engineer pour concevoir et optimiser des pipelines de données. Vous développerez des architectures robustes, automatiserez les processus de collecte et de transformation, et assurerez la qualité et la sécurité des données. Les candidats doivent avoir un Bac +5 en informatique et au moins 3 ans d'expérience, avec des compétences en Python, SQL et des outils Big Data tels que Hadoop et Spark. Poste basé à Lyon.

Qualifications

• 3 ans d'expérience dans un environnement similaire.
• Expérience en banque/assurance est un plus.
• Excellentes compétences en communication et travail d'équipe.

Responsabilités

• Concevoir des architectures de données robustes.
• Développer et automatiser les pipelines de données.
• Optimiser performances et scalabilité des systèmes.
• Assurer la quality et conformité des données.

Connaissances

Python

SQL

Scala

Java

Hadoop

Spark

Kafka

Airflow

Talend

NiFi

Formation

Bac +5 en informatique ou data science

Outils

AWS

GCP

Azure

BigQuery

Snowflake

S3

Description du poste

Dans le cadre de notre croissance, nous recherchons un Data Engineer (H / F) pour concevoir et optimiser les pipelines de données, en garantissant un accès fiable, performant et sécurisé aux données. Vous interviendrez sur des projets à forte valeur ajoutée dans un environnement technique stimulant..

Plus précisément, que ferez vous ?

• Concevoir des architectures de données robustes (Data Lakes, Warehouses, etc.).
• Développer et automatiser les pipelines de collecte, transformation et diffusion de données.
• Optimiser les performances et la scalabilité des systèmes de traitement.
• Veiller à la sécurité, la qualité et la conformité des données (RGPD).
• Collaborer étroitement avec les Data Analysts, Data Scientists et équipes IT.
• Assurer une veille technologique continue sur les outils et pratiques du domaine.
• De formation supérieure (Bac +5) en informatique, data science ou équivalent.
• Vous disposez d'au moins 3 ans d'expérience dans un environnement similaire
• Une expérience en banque / assurance est un plus
• Vous êtes force de proposition, autonome et réactif
• La rigueur et l'organisation sont nécessaires
• Bon esprit d'analyse, sens de l'optimisation et de la sécurité des données.
• Excellentes compétences en communication et en travail d'équipe.
• Anglais est un plus dans un contexte de développement international.

Outils & environnement :

• Maîtrise de Python, SQL et d'au moins un langage backend (Scala, Java).
• Expérience avec les outils Big Data : Hadoop, Spark, Kafka.
• Connaissance des bases de données relationnelles et NoSQL.
• Maîtrise d'un environnement cloud (AWS, GCP ou Azure).
• Pratique des outils ETL (Airflow, Talend, NiFi) et des solutions de stockage type BigQuery,Snowflake, S3.
• Liste non exhaustive

Votre motivation et votre investissement seront des critères déterminants pour réussir sur ce poste.

En tant que société inclusive, l'intégralité de nos postes sont ouverts à toutes et tous, sans aucunes distinctions.