Senior Data engineer HF

Devoteam; Lille; Sur place; EUR 40 000 - 55 000; Plein temps

Résumé du poste

Une entreprise technologique recherche un Data Engineer Senior pour rejoindre son équipe à Lille. Vous serez responsable de la conception d'architectures Big Data et du développement de modules ETL avancés. Une expertise en SQL, Python et des compétences dans des outils comme MongoDB et AWS sont indispensables. Ce poste ne propose pas de travail à distance et nécessite plus de 5 ans d'expérience dans le domaine des données.

Qualifications

• Plus de 5 ans d'expérience professionnelle en ingénierie des données.
• Capacité à travailler en équipe et à guider des collègues moins expérimentés.
• Maîtrise avancée de SQL, Python, Git.

Responsabilités

• Conception de l'architecture des chaînes de traitement Big Data.
• Développement des modules ETL avancés.
• Définition et implémentation des API.

Connaissances

Apache Hive

S3

Hadoop

Redshift

Spark

AWS

Apache Pig

NoSQL

Big Data

Data Warehouse

Kafka

Scala

Formation

Diplôme d'ingénieur ou Master 2 en informatique

Outils

MongoDB

Snowflake

Databricks

Hadoop

Spark

Scala

Apache Matillion

Talend

Kafka

SAP

Power BI

Kubernetes

Docker

Cloudera

cloud (AWS, GCP, Azure)

Description du poste

En tant que Data Engineer Senior vous rejoignez notre équipe lilloise pour mener la transformation des systèmes d'information de nos clients. Vos missions principales seront :

• La conception de l'architecture des chaînes de traitement Big Data pour des environnements de grande échelle en garantissant leur robustesse et leur performance.
• Le développement des modules ETL avancés (extraction transformation stockage) répondant aux besoins de traitement intensif des données.
• La définition et l'implémentation des API pour une intégration optimale dans des écosystèmes complexes.
• La supervision des déploiements en utilisant des méthodologies Agile / DevOps afin d'optimiser les processus.
• L'automatisation des workflows critiques pour maximiser l'efficacité opérationnelle.

Qualifications :

• Diplôme d'ingénieur ou Master 2 en informatique et plus de 5 ans d'expérience professionnelle en ingénierie des données.
• Gestion de projets complexes, capacité à travailler en équipe et à guider des collègues moins expérimentés.
• Maîtrise avancée de SQL, Python, Git et expertise approfondie dans MongoDB, Snowflake, Databricks, Hadoop, Spark, Scala, Apache Matillion, Talend, Kafka, SAP, Power BI, Kubernetes, Docker, Cloudera et cloud (AWS, GCP, Azure).
• Maîtrise du niveau anglais indispensable.
• Expérience dans des projets Open Source ou environnements cloud considérée comme un atout.

Remote Work : No

Employment Type : Full-time

Key Skills :

• Apache Hive
• S3
• Hadoop
• Redshift
• Spark
• AWS
• Apache Pig
• NoSQL
• Big Data
• Data Warehouse
• Kafka
• Scala